数据网格中高性能存储管理的研究与实现

在地质资源信息应用网格的实施中,我们结合了经典数据网格技术和P2P技术的优点,充分利用网格中所有节点的能力,提出了一种新的数据网格存储管理方案,为网格环境中的数据文件提供了高速,可靠的存储管理服务。本文重点介绍该方案的原理和实现。     

医学数据网格中数据一致性问题研究及实现

分析了数据网格中数据不一致问题的产生以及数据网格中一致性服务的主要内容．基于数据访问特点，深入研究了数据网格中的一致性策略．结合上海医学网格第一阶段，即耳鼻喉医学网格的实际设计实现了一种新的数据一致性算法．最后还提出了在更为复杂的上海医学网格第二阶段，即乳腺癌医学网格中的一致性维护算法的思想．     

数据网格中面向服务的事务技术

讨论了数据网格的背景以及目前国内外的研究状况.并根据应用的需求,提出了数据网格中面向服务的事务管理观点.定义了服务事务在数据网格体系结构中的位置、功能和实现方案,阐述了原子事务和业务事务两类事务的实现协议,最后以一个原子事务的例子说明了一个服务事务的执行过程.     

数据备份与存储管理

随着计算机应用的不断普及，人们对计算机的依赖性越来越大，对计算机应用系统的要求也越来越高。衡量计算机系统的可用性包括两层含义：（1）不发生故障，或少发生故障；（2）即使发生了故障，也能够立即进行修理并恢复正常运行。前者用平均无故障间隔时间（MTBF）来描述，间隔时间越长系统可靠性越高。后者用平均修复时间来描述，这个时间越短，系统的可维护性越好。系统恢复包括系统结构的恢复和数据文件的恢复两大部分：（1）结构恢复。是指在系统的某组成部分出故障后恢复该部分在系统中所承担的功能。（2）数据文件恢复。系统中某部…     

企业数据网格平台模型的研究与实现

数据网格作为网格客体分类中的最基础层,将企业内部大量业务不能互联互通、资源不能共享、数据不能联动的异构应用系统整和在一起.通过利用基于OGSA体系结构的最新网格开发工具GT4构建一个企业数据网格平台(Enterprise Data Grid Platform,EDGP)来集成现有应用系统,将各应用系统的数据封装为服务,实现不同应用系统数据库、数据中心之间数据交互和联动.该文首先论述了EDGP的结构及部署机制,接着对服务动态集成机制、系统安全机制、非标准数据与标准数据转换机制,及数据联动机制等关键技术进行了研究.     

数据网格中数据交互处理模式研究

作为业界的研究新热点——网格技术,随着其应用领域的拓展,其具体的应用网格也由单纯的计算网格发展到数据网格、拾遗网格、信息服务网格等应用重点不同的具体应用网格。该文简单探讨了数据网格的体系结构及应用场景,并着重对在数据网格中所出现的不同数据交互处理模式进行了探讨。针对其应用条件和场合的不同,将数据网格中的数据交互处理模式分为三大类六个不同的处理模式,对每种模式的具体工作机制进行了探讨,并给出了一定的应用描述。     

基于数据网格的异构信息共享平台的实现

由于军事领域中情报信息的相对分散独立，存在信息孤岛的特点，使用数据网格可以将这些分布式的异构信息组织起来，实现资源共享和信息集成。ECIShare信息平台在数据网格DataGridTool上对不同数据库系统和文件系统进行统一管理，实现了信息发布、信息查询和发现、信息的安全访问控制等功能。     

GridDaen数据网格中Cache机制的设计与实现

数据网格是一个典型的分布式系统,访问其中的广域分布的海量数据需要很大的时间开销,介绍GridDaen数据网格系统实现高速数据统一访问的Cache技术。GridDaen采用二级Cache机制,使用两个数据缓冲表来快速定位缓冲数据和控制缓冲数据访问,给出了各级Cache的数据替换算法,并提供了灵活的配置方法,可以将Cache与客户机,服务器独立分布,实现了Cache的扩展性。     

利用网格技术实现校园FTP系统

分析了FTP服务的原理和缺点,给出了一个基于网格的校园FTP系统的设计模型.采用Globus Toolkit的MDS和Grid FTP这两个组件实现了网络资源监测和发现以及网格数据传输机制.     

高性能网格环境中的数据管理和传输

本文介绍高性能网格环境中两个基本的数据管理服务:在广域网环境中安全、有效、可靠的数据传输和注册、定位数据的多重复制的能力,描述了网格服务体系结构中数据管理服务的设计.     

数据网格环境中数据传输服务的研究与实现*

通过对GridFTP作部分修改,实现了独立于Globus环境的、高性能、可靠的数据网格中的数据传输服务,它具有支持基础的安全机制、并行传输、三方传输等功能。剖析了GridFTP,详细介绍了基于GridFTP数据网格环境中的数据传输服务实例。     

基于网格环境的数据管理研究

分析了网格环境下数据资源不同于其他资源的特点,针对这些特点论述了网格数据管理所面临的问题．据此分析了面向文件的数据管理服务和面向数据库的数据管理服务的实现。     

电网生产管理数据仓库的设计与实现

为了满足对生产管理进行决策分析的业务需求,对某电网公司生产管理进行了需求分析,对生产管理数据仓库进行了总体设计,制定了数据从源系统到数据仓库中进行存储的ETL技术方案,最后利用展现工具查询和分析数据,实现决策支持,为生产管理的决策提供了可靠的依据,同时也验证了数据仓库的设计。     

数据网格中信息服务技术的研究与实现*

针对传统数据网格信息服务的不足之处,在分析Web搜索引擎技术和基于关键词的数据库索引技术基础之上,结合这两种信息获取技术,设计了数据网格中结构化数据资源发现技术的体系结构.在科学数据网格信息服务系统中,利用开源Lucene全文检索软件包,实现了结构化数据资源发现的关键技术.     

异构数据仓库中数据存储与访问的研究与实现

从分析国内外的数据仓库应用现状入手,指出银行在应用数据仓库过程中存在的存储效率低,访问权限难以控制等问题.然后基于对数据存储的分类,提出了关系数据库和多维数据库混合存储的方法,并将其在农业银行的经营管理业务分析系统中实现,测试表明该系统达到了节省存储空间和提高访问速度的效果.     

一种iSCSI存储管理系统的研究与实现

针对iSCSI存储系统管理要求，通过对简单网络管理协议(SNMP)和基于Web的管理系统模型的深入研究，设计了一个基于SNMP/Web的图形化统一管理平台，实现了存储网络拓扑发现、存储的数据管理和存储资源管理，该系统具有良好的扩展性和跨平台能力。     

海量数据存储管理技术研究

海量数据存储管理在各行业的信息化过程中越来越重要,受到了广泛的关注.综述了海量存储管理技术的研究及应用现状,介绍了一些关键技术,包括数据存储架构,分级存储,数据自动化归档,业务流程控制,并发设计,数据服务等,最后,结合当前海量数据存储管理技术,指出了海量数据存储管理面临的一些新的发展方向.     

非结构化数据存储管理研究

非结构化数据通常指相对于关系数据而言没有固定的显式结构的数据,比如视频、音频、图像、文档等非结构化数据。根据权威数据咨询机构或研究机构的预测报告显示,近 5～10年的数据量将呈指数级增长,而其中的非结构化数据占到当前数字信息总量的70%～85%。面对如此庞大的数据量和信息量,如何有效管理非结构化数据、获得有价值的信息或知识显得迫在眉睫。(非结构化) 数据管理可以简单化为3个目标,即:实现数据的“存得下、管得了、用的上”。本文将主要围绕前两个基本目标介绍目前的非结构化数据存储管理的研究情况。同时介绍中国人民大学非结构数据管理(Unstructured DataManagement,UDM)研究小组基于“自由表”数据模型和BUD(Bank of Unstructured Data)参考体系模型在这一个问题上所作的初步研究与探索工作,以及在原型平台myBUD中的若干存储管理技术。