面向服务的云数据挖掘引擎的研究

数据挖掘算法处理海量数据时,扩展性受到制约。在商业和科学研究的各个领域,知识发现的过程和需求差异较大,需要有效的机制来设计和运行各种类型的分布式数据挖掘应用。提出了一种面向服务的云数据挖掘引擎的框架CloudDM。不同于基于网格的分布式数据挖掘框架,CloudDM利用开源云计算平台Hadoop处理海量数据的能力,以面向服务的形式支持分布式数据挖掘应用的设计和运行,并描述面向服务的云数据挖掘引擎系统的关键部件和实现技术。依据面向服务的软件体系结构和基于云平台的数据挖掘引擎,可以有效解决海量数据挖掘中的海量数据存储、数据处理和数据挖掘算法互操作性等问题。     

分布式日志服务关键技术研究

在分析大型分布式系统对日志服务需求的基础上,设计并实现了一种分布式环境下的日志服务。文章从分布式系统的特点出发,介绍了该分布式日志服务中用到的关键技术,包括:体系结构设计、文件缓冲与传输、时钟同步、运行时调试、日志报警等。实际应用表明,采用以上关键技术实现的分布式日志服务有效地简化了分布式应用系统的开发、调试和维护,可广泛应用于各种分布式应用系统中。     

分布式产品设计的协同工作环境

分布式设计技术是当前CAD技术的一个重要方向。为了实现分布式设计过程中信息的有效共享和协作,该文建立了支持分布式产品设计的协同工作环境。给出了系统的体系模型为包含中间层的多层体系结构。针对分布式产品设计特点,详细介绍了支撑分布式产品设计的产品设计引擎,包括产品数据交换引擎、消息传输引擎、知识检索引擎、安全服务引擎以及系统日志引擎等。该体系结构的提出,为在分布式环境下建立灵活高效的协同设计系统奠定了基础。     

WebSASE监控管理系统设计与实现

在基于Web服务的应用支撑环境(WebSASE)中,为了监控和管理环境中多个分布式工作流引擎及Web服务运行容器的运行状态、监控部署在引擎中组合服务/服务的运行状态,给出了一个基于Web服务的应用支持环境监控管理系统的设计与实现.     

大规模文件上传接收服务的负载均衡引擎研究

针对大规模网络环境下的文件上传接收服务系统的需求,设计了一个集群架构的文件接收服务系统,采用多台接收服务器来实现文件接收服务,提高了系统的稳定性和可用性。根据文件传输的特点,综合考虑文件流量负载情况和服务器当前负载情况,提出了一个综合负载统计的负载均衡算法,测试结果表明基于该算法的文件接收集群系统具有较好的负载均衡效果。设计并实现了文件上传接收服务系统的负载均衡引擎,解决了系统的负载失衡问题,提高了系统的运行效率。     

大规模文件上传接收服务的负载均衡引擎研究

针对大规模网络环境下的文件上传接收服务系统的需求,设计了一个集群架构的文件接收服务系统,采用多台接收服务器来实现文件接收服务,提高了系统的稳定性和可用性.根据文件传输的特点,综合考虑文件流量负载情况和服务器当前负载情况,提出了一个综合负载统计的负载均衡算法,测试结果表明基于该算法的文件接收集群系统具有较好的负载均衡效果.设计并实现了文件上传接收服务系统的负载均衡引擎,解决了系统的负载失衡问题,提高了系统的运行效率.     

基于模糊控制的分布式服务流程引擎自动配置策略

在面向大规模业务的分布式服务流程应用环境中,服务流程的分布式执行引擎的自动配置管理是一个非常重要的问题.现阶段,简单的、静态的引擎节点配置并不能达到很好的效果.为此,提出了一种新的引擎自动配置管理算法,即基于模糊控制的服务流程引擎自动配置算法,同时在一个基于JINI的分布式服务流程引擎系统中,比较了该动态配置算法和常见的静态算法的性能.实验结果表明,该自动配置策略较静态策略而言能明显提高服务流程引擎系统整体响应时间的稳定性,使得服务流程引擎服务器能够根据外部请求负载情况进行自动的调节和配置,从而更好地适应不断变化的运行环境.     

多引擎协作体系结构下引擎调度机制的研究与实现

随着Internet应用的发展,支持分布式应用已成为应用体系结构的基本特征,为了加快系统的开发效率,开发模式和开发过程的研究成为研究热点,利用组件和中间件技术的多引擎协作体系结构可以加快应用系统的开发过程。多引擎协作体系结构中的多引擎调度机制是多引擎协作体系结构的核心问题。该文研究、分析了多主体协作理论,以及分布式使用组件的需求,同时定义了多引擎调度机制的功能,并设计了多引擎调度机制的体系结构。在多引擎协作体系结构下多引擎调度系统中,可以灵活地定义各种分布式操作服务引擎,同时定制需要实现的功能,引擎调度机制就可以根据这些定制内容,调用已定义的分布式操作服务引擎,来实现定制的功能。通过定制可以显著地提高系统的开发效率。     

规则引擎在分布式环境下应用的研究*

通过结合JSR（Java specification request）94规范和Web服务技术,实现了一个集成平台。该平台为大多数规则引擎在分布式环境下无法有效应用这一大问题提供了解决方案。利用该平台,企业应用系统可简单有效地远程调用所有实现了Java规则引擎API的规则引擎。这些规则引擎均无须作任何更改。     

基于Rsync的远程文件同步优化模型

针对云存储中无法较细粒度地控制网络数据的传输而导致网络带宽利用低的问题,本文基于Rsync文件同步算法,以Hadoop分布式文件系统(HDFS)为研究目标,提出计算分离出云,本地数据表与云服务端分布式缓存表共享部分校验值的远程文件同步优化模型.实验结果表明,该模型可有效提高云存储文件同步系统的I/O性能,减小同步的成本.     

分布式控制系统中设备服务器软件的设计与实现

讲述了分布式控制系统中用于提供设备访问服务的设备服务器软件的实现方法。详细介绍了多线程网络通信的设计与实现方法，并对软件中的多线程同步、日志维护、数据库操作等问题进行了讨论。     

计算机网络群组通信研究

计算机网络的发展使通过网络相连的计算机集合成为一个相互协调的统一整体,并为人类群体成员间的协作配合提供了新的工具。目前计算机网络中有关群组通信的研究十分活跃,是计算机网络研究的关键技术之一。群组通信为分布式文件系统、分布式数据库系统、并行计算、容借系统和计算机协同工作系统等各种分布式应用系统提供所需的通信服务。文中给出了群组通信的体系结构,并对群组通信中的点到多点通信、群同步等问题进行了研究。     

基于差异的文件同步系统的设计和实现

基于传统的文件同步框架（rsync）构建而成的文件备份中心存在着服务器负荷过重、网络传输数据过多等不足。通过对其架构做出改进,设计和实现了一种新的文件同步系统（DFSS）,系统采用在客户端加入卷影拷贝服务（VSS）功能,并在客户端通过使用快照来计算客户端文件和服务器文件之间的差异,从而达到快速计算文件差异、降低服务器计算量、减少网络传输数据量。     

一种容错的分布式服务器复制与更新协议

针对分布式环境提出一种容错的文件数据复制与更新机制,其算法/协议建立在分布式算法理论的基础上,具有较强的容错性、故障恢复透明性和较高的效率,支持服务器同步和异步两种复制模式以及客户机启动与服务器启动两种工作方式。该机制可广泛应用于Internet分布式文件系统、分布式数据库、WEB镜像服务器以及分布式软件分发、群集服务器等应用中。     

异构分布式文件系统GSHDFS名字服务的设计与实现

名字服务是异构分布式文件系统的核心部分．在参阅国内外众多分布式文件系统的基础上，提出一种新的命名方案──输出共享方式，在保留原文件系统命名语法的前题下，将本地文件系统与远程文件系统有机地结合起来，并采用混和的分布方式实现了名字服务员，达到了位置透明性要求．     

基于网络软RAID的分布式文件系统的设计与实现

随着计算机技术与网络技术的快速发展,网络分布式存储逐渐成为存储技术研究的重点。分布式文件系统作为分布式存储系统中数据的管理者,为不同节点上的用户提供了对底层存储系统的文件访问接口。文章设计与实现了基于网络软RAID的分布式文件系统,并对系统的设计思想、总体结构和技术要点进行了详细介绍。     

Layered interactive convergence for distributed clock synchronization

A clock synchronization service ensures that spatially dispersed and heterogeneous processors in a distributed system share a common notion of time. In order to behave as a single, unified computing resource, distributed systems have need for a fault-tolerant, clock synchronization service. One approach employs the interactive convergence (ICV) method, which is both fully distributed and inherently fault-tolerant. However, this approach suffers from limits in terms of system scalability due to resource overhead. In this paper, a new layered form of ICV is introduced, compared with basic ICV and other simpler alternatives via experimental analysis on a distributed system testbed, and shown to improve synchronization tightness, resource utilization, and scalability.     

中小型网站站内搜索引擎的设计与实现

站内搜索引擎是针对某个网站内部的全文检索服务,具备信息检索的核心技术。提出在文件系统上构建的解决方案,使用全文检索开发工具包——Lucene,实现站内搜索引擎系统。不仅针对关系数据库的数据,还对服务器文件系统上的各种非结构化文档数据进行加工、信息抽取,并创建索引文件进行搜索,最终实现对站内被检索数据的导航浏览,关键字高亮提示,筛选排序等。经过测试,检索效率较高,效果良好。     

用于教育资源管理的网格文件系统

基于Internet的远程教育是当今及未来教育的一种重要途径,它需要管理大量的教育资源及用户。在这样一个网格环境下,需要有一个具有高可扩展性、具有动态复制的分布式文件共享途径。该文在回顾了文件共享方面的相关工作之后,提出了一种基于Web的分布式文件管理架构——网格文件系统(GridFS)。描述了它的拓扑结构及文件访问服务和元信息服务。GridFS对许多网格应用、数字图书馆的互联和多级Web Cache系统是有益的。