垂直搜索引擎的抓取系统——基于网络蜘蛛技术

网络信息资源的爆炸式增长使得人们获得有用信息日益困难，随着垂直网站的出现和发展．专业化的垂直搜索引擎成为今后搜索引擎发展的主流。该文简要介绍了垂直搜索引擎，并重点对其抓取系统所应用的网络蜘蛛技术做了详细分析，最后讨论了垂直搜索引擎的发展方向。