基于分布式架构的主题信息采集系统

针对主题信息采集系统存在的采集效率低和可扩展性差等问题,研究分布式采集系统架构,设计一种基于局域网的多节点服务器架构主题采集系统,解决了客户/服务器模式在采集网页数据增多时服务器控制端性能下降的问题,弥补了自治模式下网络间传递信息量增加导致数据延迟的缺陷。通过分别构建单节点服务器架构系统和基于局域网的多节点服务器架构系统进行实验,分析采集速度、平均采集速度和准确率等评价指标,分析结果表明,多节点服务器架构性能明显优于单节点服务器架构。