大数据环境下基于python的网络爬虫技术

作者:郭二强; 李博
来源:计算机产品与流通, 2017, (12): 82.
DOI:10.16589/j.cnki.cn11-3571/tn.2017.09.017

摘要

在网络信息量呈"爆炸式"增长的今天,用户急需可以从海量信息中准确提取出所需信息的技术手段。在这一背景下,网络爬虫技术因其强大的自动提取网页信息能力而得到了人们的持续关注。因此本文将通过在简单介绍网络爬虫技术基本内涵的基础上,结合具体案例尝试对大数据环境下基于python的网络爬虫技术进行简要分析研究。

全文