基于Java线程池技术的数据爬虫设计与实现 |
| |
引用本文: | 刘文,王标,王丁.基于Java线程池技术的数据爬虫设计与实现[J].电脑编程技巧与维护,2016(7):8-9. |
| |
作者姓名: | 刘文 王标 王丁 |
| |
作者单位: | 国际关系学院,北京,100091 |
| |
摘 要: | 为了改善数据获取爬虫程序的运行性能和提高数据获取效率,分析了数据爬虫的原理与架构,设计并实现了一种基于Java线程池技术的爬虫程序架构。该爬虫程序采用多个线程并行处理页面,极大地改善了数据获取的效率,提高了用来获取数据的机器的资源利用率。
|
关 键 词: | Java多线程 线程池 数据爬虫 |
本文献已被 维普 万方数据 等数据库收录! |
|