计算机集群系统中的网络技术

本文介绍了计算机集群系统中的高速互连网技术,着重阐述了几种在集群系统中广泛使用的网络类型及其主要技术和发现状,最后介绍几种网络通信协议。     

集群系统与分布式计算

集群技术与集群系统是实现高性能计算的新途径。常见的集群架构分为Web／Internet集群系统和并行运算集群系统两种。集群技术的一个非常重要的方面是资源管理和负载平衡。集群系统可以分为高性能科学计算群集、负载均衡群集、高可用性群集等三大类。分布式计算是集群技术的理论基础，包括中间件技术、网格技术、移动Agent技术等。最后介绍了中科红旗的两个集群系统产品负载集群和高可用性集群。     

一种新型网络信息采集器的研究

为了克服内容评价搜索策略算法近视和链接分析算法主体偏移的缺点,提出了一种使用内容评价搜索策略和链接分析策略结合的算法.使用的方法开发网络信息采集器能够极大地提高用户的检索速度,并能有效地限制检索领域,大大减小检索结果的信息冗余度,使用户能够快速获取其真正需要的信息.研究表明使用内容评价搜索策略和链接分析策略结合的算法开发网络信息采集器能够提高垂直搜索引擎快、精、准等方面的性能.     

竞赛信息采集系统组网模式的建立

竞赛信息系统已经成为综合性运动会的神经中枢,竞赛信息系统的可靠与否直接关系到整个赛事的成败。竞赛信息采集系统是竞赛信息系统的核心。该课题主要讨论竞赛信息采集系统的信息采集方式,提出在不同信息采集方式下的三种组网模式。该组网模式稳定应用于第26届世界大学生运动会竞赛信息系统中。     

集群系统与分布式计算

集群技术与集群系统是实现高性能计算的新途径。常见的集群架构分为Web/Internet集群系统和并行运算集群系统两种。集群技术的一个非常重要的方面是资源管理和负载平衡。集群系统可以分为高性能科学计算群集、负载均衡群集、高可用性群集等三大类。分布式计算是集群技术的理论基础,包括中间件技术、网格技术、移动Agent技术等。最后介绍了中科红旗的两个集群系统产品负载集群和高可用性集群。     

智能变电站信息采集及网络结构优化研究

在智能变电站的运行过程中,其整体网络结构的复杂性以及数据采集和输送过程中的重复性等问题屡见不鲜,针对智能变电站的网络结构进行一定的优化调整并促使智能变电站做好自身的信息采集工作,是智能变电站工作单位值得注意的重点工作内容,对智能变电站工作效用的最大程度发挥以及维修成本的降低有着非常重要的促进作用。本文将对智能变电站中信息采集工作以及网络结构的优化工作进行具体的分析和讨论。     

集群技术与集群系统

一、集群发术产生的背景随着计算机应用的不断发展，人们提出各种各样更高的要求，正是这些要求推动着集群（Cluster）技术的产生和发展这些要求主要反映在以下几方面：不断增长的能力和投资保护人们只有在使用计算机的过程中，才能不断认识计算机，才会不断扩大计算机的应用，提出各种更高、更深层次的要求。因此，对计算机系统的要求，将随着应用的发展而越来越高。如果你建立系统时，系统的能力只能满足当前的需要，就会面临应用发展后怎么提高系统能力的问题。老机器淘汰，用新机器取代就会产生原有软硬件投资、应用开发的投资、培训的…     

基于数据挖掘的网络信息采集与整编

在计算机技术迅猛发展的今天,依托互联网产生的服务越来越多,产生的数据也越来越庞大.为了在繁杂庞大的数据中找到有用信息,提高信息的利用率,人们提出了数据挖掘的概念,旨在从海量数据中发现更加有价值的信息.对基于数据挖掘的网络信息采集与整编进行了分析,旨在更好地促进数据挖掘技术在网络信息采编中的应用.     

LonWorks网络节点信息采集和监控方法研究

网络数据自动采集和管理功能的完备性是衡量系统自动化、网络化程度的重要标志。本文通过对LonWorks网络节点信息自动采集、监控功能的原理和实现方法的分析，提出一套行之有效的数据自动采集、监控与数据管理集成方法，以提高管理的简洁性和使用的方便性。     

基于网络集群系统的并行数据库中数据均衡分布研究

1 引言随着信息处理技术的不断发展,信息量的急剧膨胀,对数据库系统提出了更高的要求;并行计算机系统的快速发展,使得并行运行环境逐渐趋向成熟,广泛应用于科学计算与研究的众多领域,并行数据库的研究也越来越受到广泛的关注,并已经成为数据库研究中一个重要的研究领域。     

基于Java线程迁移的Web包容器集群系统的实现

Web包容器集群解决了Web包容器系统容量问题,其核心思想是负载均衡。传统的做法是单一地把HTTP请求静态地分配到各集群节点,这种方法最大的缺陷是不能动态地均衡负载。论文提出了一种前端使用HTTP请求分配,后端使用Java线程迁移的Web包容器集群系统,从很大程度上动态地均衡了节点之间的负载。     

基于Web的集群管理系统结构

介绍高性能计算集群管理现状, 并根据目前管理缺点与不足, 对集群管理系统进行了总体框架设计, 利用Linux中/proc文件系统、MySQL数据库及Web技术, 对管理数据采集、数据存储及应用接口进行了功能设计, 最终实现了在统一Web界面中对集群系统运行实时情况、历史数据统计与分析进行管理.     

一个基于机群的可扩展的Web缓存服务器

解决分层缓存系统较高层缓存器的瓶颈问题可用扩展性好的机群系统来实现。文章在分析了目前已有的两种典型的机群缓存服务器的基础上,提出了一个新的Web缓存服务器系统。在新系统里引入了摘要缓存机制,使系统形成单一缓存映像,达到快速访问的目的。摘要信息文件的缩短和单一入口点只传输请求不传输响应的机制,减轻了系统里请求分配器的负担,系统可扩展性好。解决缓存系统的热点文件和机群系统的异构性问题的动态负载平衡算法有利于提高系统的吞吐率。     

基于Heritrix的商品信息搜索的网络爬虫系统的设计

探讨以开源软件Heritrix体系构建的获取商品信息爬虫系统,针对Heritrix开源爬虫项目存在的问题和商品采集的特点,项目设计了定向抓取包含某一特定内容的网页的类,从而改进Heritrix,并引入ELFHash算法进行URL散列中,以提高抓取效率,为面向商品的搜索系统以及数据挖掘提供可靠的数据源。     

主动接纳策略的Web集群多维QoS目标优化调度算法

针对以往的调度算法对服务器本身的研究较多，而结合网络流量特征采取相应调度策略研究较少的情况．提出了一种结合网络自相似访问特征的接纳控制策略，分析了一种综合考虑Web集群系统中多维调度因子的多目标函数．在此基础上提出了一种既适应网络访问特征，又支持QoS的Web集群调度算法．最后给出了其算法性能测试结果．     

基于集群计算机的信息处理系统设计

C4ISR系统的信息处理需要实时和可靠,文章针对信息融合算法的特点,设计了基于集群计算机的信息处理系统,通过多节点冗余和并行计算实现了系统的可靠和高性能,并给出阶段测试结论。     

基于聚类分析的Web信息搜索算法研究

本文分析了Web信息搜索中的Leader算法其聚类结果中可能存在重叠区域;k-means算法其k参数的确定可能需要多次尝试。结合上述二种聚类分析算法提出将Leader算法和k-means算法融合可以同时解决上述问题,且在实际的Web信息搜索中更能体现聚类分析的优势。     

基于服务簇的空间信息服务自动发现

现有Web服务自动发现方法中存在服务匹配程度区分不明显、服务发现精度不高等问题。为此,提出一种基于服务簇的空间信息服务自动发现算法。对发布的空间信息服务进行聚类分析,计算服务请求与各服务簇中心的相似度,由此确定最优匹配簇,根据服务请求与最优匹配簇中服务的语义相似度,得出服务请求的最优匹配服务。实验结果表明,该算法在实现对Web服务匹配程度定量表示的同时,能有效提高匹配程度的区分度和服务发现的查全率和效率。     

基于链接回溯的地理信息更新主题爬虫研究

互联网的崛起为地理信息更新检索提供了一条新的途径,具有实时性强、成本低的优势。文中从实际出发,针对现有爬虫算法的缺陷,提出一种基于链接回溯的地理信息更新主题爬虫方法。首先,结合支持向量机分类技术,能够快速有效地找出一个网站中最有可能包含主题相关内容的链接方向;然后,回溯到这些链接后继续进行爬取,并通过地理信息变化要素知识库确定主题内容,从而优化爬取路径,减少低效率的爬取过程。实验结果表明,该方法可以找出最有可能包含地理信息的链接方向,大幅提高主题爬取效率,在其他主题方向也具有一定的可推广性。     

基于聚类语言模型的生物文献检索技术研究

近年来研究表明使用主题语言模型增强了信息检索的性能,但是仍然不能解决信息检索存在的一些难点问题,如数据稀疏问题,同义词问题,多义词问题,对文档中不可见项和可见项的平滑问题。这些问题在一些领域相关文献检索中显得尤其重要,比如大规模的生物文献检索。本文提出了一种新的基于聚类的主题语言模型方法进行生物文献检索,这主要包括两个方面工作,一是采用本体库中的概念表示文档,并在此基础上进行模糊聚类,把聚类的结果作为数据集中的主题,文档属于某个主题的概率由文档与聚类的模糊相似度决定。二是采用EM算法来估计主题产生项的概率。把上述方法集成到语言模型中就得到本文的语言模型。本文的语言模型能够准确描述项在不同主题中的分布概率,以及文档属于某个主题的概率,并且利用本体中概念部分地解决了同义词问题,而且项可以由不同的主题产生,这也能够部分解决词的多义问题。本文的方法在TREC 2004/05 Genomics Track数据集上进行了测试,与简单语言模型以及现有主题语言模型相比,检索性能得到一定的提高。