Python爬虫在导购系统中的应用

作者：黄震^*; 高蕾; 冼沛杰; 谢杰峰; 陈智超

来源：福建电脑, 2021, 37(02): 14-19.

DOI：10.16707/j.cnki.fjpc.2021.02.004

• IP代理
• 优惠券
• 导购系统
• 爬虫
• HTML5

近年来,随着互联网的发展,出现了网上购物这种全新的购物方式。网上购物已经成为年轻人购物的主要方式。但网上的商品琳琅满目,如何挑选物美价廉的商品成为需要解决的问题,由此设计了一个基于Python爬虫的优惠券型导购系统。将淘宝、天猫、京东三大电商网站作为数据源,使用Python的requests、selenium等模块结合IP代理反反爬虫技术将商品信息与优惠券信息爬取下来,对信息进行数据清洗并存入mongo DB数据库中,由后台服务器程序整理数据,并在基于HTML5的安卓端APP展示出来供用户查看与选择。该系统简单高效,可以改善用户的购物体验,具有较高的实用价值。

• 单位
  惠州学院