网格环境下数据集成模型研究

基于OGSA—DAI给出了一个用于解决网格环境下异构数据源数据集成和分布式查询处理的数据集成模型,在此基础上利用客户端元数据库解决了用户对目标数据库信息了解匮乏的问题,从而为用户的分布式查询处理提供了一种直观透明的、可视化的虚拟数据库视图环境。     

基于网格的分布式异构数据集成模型

在分析了现有异构数据集成系统不足的基础上，通过引入网格服务技术，提出了一个基于网格的分布式异构数据集成模型。由于引入了基于网格计算中间件GT4的网格数据服务，因此该模型能高效地访问分布式异构数据源，而且在需要时可以利用可靠的文件传输服务来传输大量数据，并把XML作为数据交换和集成的介质。最后给出了模型的具体实例。     

网格中代码数据库访问与集成的研究

东营市组织机构代码数据库和扫描库在2001年已经和全省代码数据库共享,通过省中心与国家代码中心数据库联网,汇集了大量分布、异构、多管理域的数据资源,使得网格用户对代码数据的访问变得非常复杂,必须为用户提供行之有效的方法,实现方便、高效、透明、统一的数据访问。该文描述了一种基于包装器—仲裁器(Wrapper-Mediator)[4]方法,这种方法采用虚拟数据集的机制将汇聚在网格中的存储系统抽象成一个虚拟一体化系统,实现了网格数据的统一视图和一种网格环境中的数据统一访问方法。     

网格环境下CGSP-DAI性能的研究和分析

随着网格技术的迅速发展,海量复杂的结构化数据成为网格计算应用的主要难题,数据库技术在网格环境中的作用也变得尤为重要.对OGSA-DAI(Open grid services architecture-Date access and integration)的核心基础进行扩展,提出了一种构建在网格环境下异构数据库访问与集成的基础构架,通过虚拟表机制来集成各种异构的数据库资源,从而更加有效地在网格环境下访问和集成异构数据库,并且在大数据量查询和分布式联合查询方面做了一定的前瞻性工作.针对与单个虚拟表和多个虚拟表之间的分布式联合查询,设计两种典型实验场景,详细分析了CGSP-DAI的相关性能数据,验证了CGSP-DAI的可用性和有效性.     

基于XML虚拟数据库的异构数据源集成模型研究

解决企业数据源异构需要一种公共的数据源模型给用户提供统一的用户视图,XML以其所具有的自描述性、灵活性、强大的数据交换能力等优势克服了其他数据模式的缺点。结合当前数据集成方面的技术,提出了一种基于Ⅺ∥几虚拟数据库的异构数据源集成模型,该模型很好地解决了异构数据源集成方面存在的一系列问题,并从数据模型和数据交换上阐述了该模型的可行性。剖析了该模型中的模式集成、异构数据集成视图、全局查询等。介绍了该模型在中国石油、QHSE信息系统中的成功应用。     

基于XML的VMO数据集成系统的构想与实现

针对虚拟制造组织(VMO)环境下数据源分散、分布和异构等特点,提出了一种符合中间件标准的数据集成系统解决方案.系统通过SOAP管理器和异构数据源包装器的封装来解决数据源的分散性和分布性,运用XML全局数据模式技术来解决数据源的异构异质,同时利用虚拟数据库、查询优化等技术来提高整个系统的性能和效率.举例说明了网络化制造信息服务平台中查询操作的流程实现.     

基于XML虚拟数据库的异构数据源集成模型研究

解决企业数据源异构需要一种公共的数据源模型给用户提供统一的用户视图,XML以其所具有的自描述性、灵活性、强大的数据交换能力等优势克服了其他数据模式的缺点.结合当前数据集成方面的技术,提出了一种基于XML虚拟数据库的异构数据源集成模型,该模型很好地解决了异构数据源集成方面存在的一系列问题,并从数据模型和数据交换上阐述了该模型的可行性.剖析了该模型中的模式集成、异构数据集成视图、全局查询等.介绍了该模型在中国石油QHSE信息系统中的成功应用.     

一种异构数据源集成查询系统的设计与开发

给出了一种分布式异构数据源集成查询系统的设计与开发。能够实现对关系型数据库、本件和XML档等不同数据源的透明存取，查询系统读取不同数据源的数据字典，通过模式管理器建立起集成模式。用户通过查询处理器建立基于集成模式的查询，系统根据连接信息和配置信息把对集成模式的查询分解成对每个数据源的子查询，各个数据源的查询结果返回后要被合并处理，再呈现给用户，实现了对异构数据源的有效查询。     

基于XML的信息集成研究

异构数据集成系统的目的是提供一个访问异构数据源的统一接口.本文结合当前企业信息集成技术,提出了一种统一的异构数据源集成模型--基于XML的虚拟数据库模型.继而剖析了该模型的层次结构、模式集成、异构数据集成视图定义.并给出了具体应用实例.该模型很好地解决了异构数据源集成方面存在的一系列问题.     

一种新的网格数据服务的设计与开发

开发了一种新的网格数据服务(GDS),在指定信息描述标准的基础上,提出了通过映射的方法解决数据在信息表示上的异构性。根据信息描述标准将数据源中的数据映射到一张虚拟数据表中,数据源中数据与信息标准之间在的映射关系保存在数据服务中的信息映射表中,用户通过数据服务对虚拟表进行查询。由于数据服务具有标准的Web Service接口,从而实现了对数据源的细节隐藏,达到对数据源的透明访问。     

网格环境中数据统一访问的设计和实现

网格中汇集了大量分布、异构、多管理域的数据资源,使得网格用户对数据的访问变得非常复杂,必须为用户提供行之有效的方法,实现方便、高效、透明、统一的数据访问。本文描述了基于操作系统之上的文件层面的数据统一访问实现方法。这种方法采用虚拟数据集的机制将汇聚在网格中的存储系统抽象成一个虚拟一体化系统,实现了网格数数据的统一视图和一种网格环境中的数据统一访问方法。     

网格环境下基于服务的分布式查询处理机制研究

OGSA-DQP是一种用于网格环境、基于服务的分布式查询处理系统,实现了运行在不同平台的分布式数据密集型应用的高级数据访问与集成服务方法,为用户提供一致的虚拟关系数据视图和分布式数据查询支持。文章描述了其体系结构、分析了其查询和优化机制,并在不同条件下测试了查询性能,为寻找系统查询性能瓶颈、提高系统查询响应时间提供依据。     

开放式网格服务架构的安全设施

网格是一种开放的分布式系统环境，它的目标是实现分布的、异构的、动态的、虚拟组织之间的资源共享。安全性是网格环境中的关键因素之一，网格的安全性主要包括数据的一致性、私有性、认证、授权与审计。深入分析了开放式系统环境中的安全模型与认证、授权框架，讨论了开放式瞬格服务架构中的网格服务安全的协议与设施。     

基于OGSA标准的发票数据库网格IDBGrid的设计与实现

该文根据OGSA标准提出将分布于全国各地的成千发票数据库虚拟化,通过对原系统的重新规划与设计,建成一个具有超强的存储和运算能力的发票数据库网格IDBGrid,IDBGrid在Web服务资源框架基础上提供网格数据库管理系统注册服务、网格数据库管理服务、网格数据服务、网格数据库复制服务、网格数据库监控服务、网格数据库故障转移服务等,提供一个统一、透明的数据库网格访问和整合界面,通过网格环境下数据库服务器之间的协同处理达到提高资源利用率、运行性能,降低开发和维护成本,增强系统健壮性和可用性的目的,文章重点研究了异构环境下数据库管理系统的网格化管理的关键技术。     

Metadata for Managing Grid Resources in Data Mining Applications

The Grid is an infrastructure for resource sharing and coordinated use of those resources in dynamic heterogeneous distributed environments. The effective use of a Grid requires the definition of metadata for managing the heterogeneity of involved resources that include computers, data, network facilities, and software tools provided by different organizations. Metadata management becomes a key issue when complex applications, such as data-intensive simulations and data mining applications, are executed on a Grid. This paper discusses metadata models for heterogeneous resource management in Grid-based data mining applications. In particular, it discusses how resources are represented and managed in the Knowledge Grid, a framework for Grid-enabled distributed data mining. The paper illustrates how XML-based metadata is used to describe data mining tools, data sources, mining models, and execution plans, and how metadata is used for the design and execution of distributed knowledge discovery applications on Grids.     

基于网格技术的分布式信息检索模型的研究

随着网上信息数量和种类的增加,传统的集中式信息检索方式已经不能满足广大用户的需求,分布式信息检索技术日益成为研究的热点。如何有效地定位、访问、浏览数据是异构广域网络中急需解决的问题,数据网格技术是解决此问题的有效手段之一。通过运用虚拟化的元数据模型与LDAP（Lightweight Directory Access Protocol）目录服务相结合,提供元数据目录服务,并在此基础上提出了单一数据访问接口,从而实现网格环境下统一的数据访问。最后基于该设计思想提出了一种分布式异构信息检索模型。     

一种基于数据网格技术的MODIS空间数据服务模型研究

介绍了MODIS数据共享与资源服务现状,研究了一种基于3层结构的MODIS数据服务模型,详细介绍了数据服务模型的管理和分发机制。为了确保数据服务模型的可扩展性和平台无关性,设计了基于XML的可扩展性数据访问语言和数据目录服务。最后给出了在空间信息网格试验床上的示范验证,并对实验结果进行分析。     

基于网格的遥感图象处理原型系统设计和实现

网格被誉为是下一代的INTERNET。文章以遥感图象处理为主线,提出了基于网格的遥感图象处理原型系统的设计方案,有效地集成了分散的遥感图象处理算法和处理能力。最后结合OTSU算法在该原型系统中发布、调用等实际运行过程来详细分析几个关键技术的实现。     

Case for dynamic deployment in a grid-based distributed query processor

Grid computing enables users to perform computationally expensive applications on distributed resources acquired dynamically. Users are allowed to combine structured data and analysis components into new applications from distributed sites into new applications. Distributed query processing offers an established way of structuring such computations, and well-known tools like OGSA-DAI and OGSA-DQP provide respectively a common interface to heterogeneous databases, and a way of exploiting distributed resources. Such significant benefits are however often undermined by high communication costs due to the need to move data between distributed resources. This paper describes an approach that addresses this by dynamically deploying query processing engines, analysis services and databases within virtual machines, on an internet-scale, so as to reduce communication costs. Results of internet-scale experiments are presented to demonstrate the performance benefits. Further, the use of dynamic deployment features based on requirements allows the creation of an ad-hoc runtime engine and thus opens up the possibility of creating a virtual marketplace for software and hardware resources.