一种分布式搜索引擎设计

1 引言随着Internet的发展,地理上分散的、功能独立的计算机系统内的海量信息资源也由封闭式转变成开放式。其信息特点是;(1)Internet的信息组织形式各异,分布广泛;(2)数据和服务的类型都在增加,可利用性和可靠性也在不断的变化;(3)信源的动态性。这些特点导致信息量巨大,而且信息的获取并非容易。由此带来了一个重要的问题就是搜索引擎的设计。所谓搜索引擎,简单地说,就是指对WWW站点资源和其他网络资源的检索和管理的一类检索系统机制。搜索技术的发展是伴随计算机应用而生的,从最初的文件检索和文档的查找,到现在的Internet搜索。在这过程中,随问题的提出而逐步得到解决。例如早期人们在从大量的文件和大篇幅的文档中找到自己所需的文件和字符串。在Internet中人们的视野显得更开阔了,但是人的需求与自身的“能动力”有相当大的差距。这就要求有一种智能化的搜索机制来完成。从20世纪80年代起人们就开发了诸如Archive、WAIS、

A Distributed Search Engine Design