| 基于泛型思想的电力工业互联网爬虫框架研究 |
| |
| 引用本文： | 毕玉冰,王文庆,刘超飞,崔逸群,董夏昕,金晶.基于泛型思想的电力工业互联网爬虫框架研究[J].热力发电,2020,49(11):20-27. |
| |
| 作者姓名： | 毕玉冰 王文庆 刘超飞 崔逸群 董夏昕 金晶 |
| |
| 作者单位： | 西安热工研究院有限公司,陕西西安710054;北京中电普华信息技术有限公司,北京100000 |
| |
| 基金项目： | 中国华能集团有限公司总部科技项目 |
| |
| 摘 要： | 目前在互联网场景中使用爬虫框架已成为高效获取数据的一种重要方式，但由于现有爬虫框架针对互联网具体用户、具体场景和用途进行设计，直接用于电力工业互联网存在不适用、不安全等问题。为此，本文提出基于泛型思想的电力工业互联网爬虫框架，结合电力工业互联网的实际需求，从用户、场景、模块设计、使用等各方面进行泛型设计，使该框架不仅具备现有爬虫框架的能力，还能满足电力工业互联网数据爬取的需求。在某集团电力工业互联网生产环境进行验证试验表明，该框架能满足电力工业互联网的不同用户、不同场景的使用和安全要求，也具备现有爬虫框架的特性，泛型设计达到预期效果。
|
| 关 键 词： | 电力工业互联网 数据获取 爬虫框架 泛型思想 泛型设计 Python 网络安全 |
Research on power industry internet crawler framework based on generic thinking |
| |
| BI Yubing,WANG Wenqing,LIU Chaofei,CUI Yichun,DONG Xiaxin,JIN Jing.Research on power industry internet crawler framework based on generic thinking[J].Thermal Power Generation,2020,49(11):20-27. |
| |
| Authors: | BI Yubing WANG Wenqing LIU Chaofei CUI Yichun DONG Xiaxin JIN Jing |
| |
| Affiliation: | 1. Xi’an Thermal Power Research Institute Co., Ltd., Xi’an 710054, China; 2. Beijing China Power Puhua Technology Co., Ltd., Beijing 100000, China |
| |
| Abstract: | |
| |
| Keywords: | |
| 本文献已被 万方数据 等数据库收录！ |
| 点击此处可从《热力发电》浏览原始摘要信息 |
|
点击此处可从《热力发电》下载全文 |
|
