首页 | 本学科首页   官方微博 | 高级检索  
     

基于Java线程池技术的数据爬虫设计与实现
引用本文:刘文,王标,王丁.基于Java线程池技术的数据爬虫设计与实现[J].电脑编程技巧与维护,2016(7):8-9.
作者姓名:刘文  王标  王丁
作者单位:国际关系学院,北京,100091
摘    要:为了改善数据获取爬虫程序的运行性能和提高数据获取效率,分析了数据爬虫的原理与架构,设计并实现了一种基于Java线程池技术的爬虫程序架构。该爬虫程序采用多个线程并行处理页面,极大地改善了数据获取的效率,提高了用来获取数据的机器的资源利用率。

关 键 词:Java多线程  线程池  数据爬虫
本文献已被 维普 万方数据 等数据库收录!
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号