首页
|
本学科首页
官方微博
|
高级检索
全部学科
医药、卫生
生物科学
工业技术
交通运输
航空、航天
环境科学、安全科学
自然科学总论
数理科学和化学
天文学、地球科学
农业科学
哲学、宗教
社会科学总论
政治、法律
军事
经济
历史、地理
语言、文字
文学
艺术
文化、科学、教育、体育
马列毛邓
全部专业
中文标题
英文标题
中文关键词
英文关键词
中文摘要
英文摘要
作者中文名
作者英文名
单位中文名
单位英文名
基金中文名
基金英文名
杂志中文名
杂志英文名
栏目中文名
栏目英文名
DOI
责任编辑
分类号
杂志ISSN号
基于Python的网络爬虫技术研究
作者姓名:
崔欢欢
作者单位:
长江工程职业技术学院
摘 要:
随着网络中数据量的快速增长,网络爬虫作为搜索引擎中非常关键的一项技术,如何准确、高效地批量获取到更具价值的信息一直是其研究难点。针对此问题,本文基于Python语言的Scrapy框架展开了深入研究,在此基础上构建了通用的网络爬虫框架,并针对其关键模块的功能实现进行了详细阐述,为相关研究提供了一定的参考价值。
关 键 词:
网络爬虫
Python语言
Scrapy框架
设为首页
|
免责声明
|
关于勤云
|
加入收藏
Copyright
©
北京勤云科技发展有限公司
京ICP备09084417号