基于Python爬虫网站数据分析系统设计与实现 |
| |
作者姓名: | 杨孟姣 杜棋东 |
| |
作者单位: | 1. 湖南省石门县第一中学;2. 广州铁路职业技术学院 |
| |
基金项目: | 2018年广东省普通高校科研项目“面向地铁大客流的车站状态监测与预警仿真研究”(2018GKTSCX117); |
| |
摘 要: | 网络小说平台是全新一代知识存储空间,包含读者、作者、书籍等海量信息。为有效采集用户偏好数据,向用户精准推送相关信息,基于Python设计开发了小说网站数据分析系统。该系统包含数据采集、数据处理、数据分析展示、后台管理等模块。首先使用网络爬虫对小说网站进行数据爬取,然后对爬取的数据进行清洗,再对数据进行持久化存储、统计分析和展示。该系统具有高效获取、分析和处理网络小说平台数据的功能,具有实用价值。
|
关 键 词: | 网络小说 Python数据爬取 数据分析 |
|
|