面向社交网站的主题网络爬虫——以豆瓣网站为例

作者：牟宁; 郭英杰; 陈杰; 窦杰; 余果芯; 李攀攀

来源：电脑知识与技术, 2018, 14(32): 251-253.

DOI：10.14004/j.cnki.ckt.2018.3823

• 主题网络爬虫
• 社交网络
• 爬虫程序

以豆瓣网站为代表的社交网络空前繁荣,传统的网络爬虫无法满足人们对社交网络信息的爬取及分析的需求,爬取与特定主题内容相关网页的主题网络爬虫便应运而生,该文设计并实现了面向豆瓣网站的主题网络爬虫,实现对豆瓣网站的特定主题页面的爬取。最后,验证了主题网络爬虫设计方案的可行性。

• 单位
  嘉兴学院