进入大数据时代,各类社交网站包涵大量的信息数据,本次研究在开源的网络爬虫代码的基础上加以创新,研究出了一种新型比较高效的爬虫算法。通过对社交网络进行有目的的数据挖掘,并进行过滤提取所需信息,存储进预先设定的数据库。