数据仓库中的数据集成转换

本文首先提出了数据仓库中数据集成的一个总体框架，然后列举了在数据转换中可能遇到的主要问题，最后根据这些转换规则，给出了一种描述性脚本语言来描述这些规则，继而给相应的处理模块解析处理。     

把Web数据并入数据仓库的研究

因特网对大多数组织机构而言，都是最大的外部数据库。如何把Web数据集成并入组织机构的数据仓库为之所用，是一个有实际意义的新课题。介绍了Web集成（WebIntegration,WI)这种系统化的方法，使用它可把Web数据并入数据仓库从而改善组织机构的决策制定过程，并提出了WI面临的问题，展望了WI的未来。     

数据集成技术综述

从现行信息需求出发,介绍了数据集成技术发展的必要性,讨论了已有的数据集成技术,分析了这些技术的优缺点,介绍了网格技术、本体技术两个新的异构数据集成技术。在此基础上给出了本体技术和中间件相结合数据集成解决方案。最后,提出了数据集成方法的发展方向。     

基于本体的Web数据语义集成体系结构的研究

目前在web环境下的异构数据集成研究,已经利用XML解决了结构的异构问题,但是未能有效解决语义的异构问题.引入本体提出利用本体解决语义异构的方法,给出一个本体驱动的web数据集成的体系结构,可以较好地解决语义异构问题.     

Web数据转换集成技术及其信息服务应用

Web的迅速普及,使获取信息比以前更加声速与方便,但由于网站数量众多,数据又相对分散,使得获取有效信息的难度加大。Web数据转换集成技术可以自动从Web上获取数据,然后集成为用户所关心的有效信息,同时还提供查询代理服务,以更好地服务用户,该文以上海信息港的“房地产信息搜索集成系统”为实用实例,对该项技术及其在信息服务方面的应用进行详细阐述。     

面向应急预案领域的Deep Web数据集成研究

应急预案是应急管理的纲领性文件,为应对频发的突发事件,各应急相关部门都建立了自己的应急预案数据库。但这些数据库存在诸多不同程度的异构,阻碍了部门之间的信息共享。针对应急预案异构数据集成,采用本体及本体映射方法解决语义异构的智能识别,以Tomcat+MyEclipse+SQL Server 2005作为开发环境,研究开发物化式Deep Web应急预案异构数据源的集成系统EPIS,创建应急预案中心数据库,为应急预案领域信息共享与应急预案的管理提供基础平台。     

基于XML技术的Web数据集成模型研究

随着互连网的迅速发展和网上数据量的增加,越来越多的应用迫切需要通过网络来交换数据,服务于决策。然而,目前Web数据结构的差异和平台差异给数据的集成带来了实现上的困难。基于此,该文提出了一种基于XML的Web数据集成模型,讨论了该模型的结构和集成方法,及其相对于传统方法的优点。     

基于Web服务的校园数据集成的安全模型设计与实现

Web服务被广泛应用于校园数据集成当中,其安全问题也日益受到重视.在分析现有的安全解决方案SSL/TLS存在的缺陷的基础上,以教务管理信息系统和财务管理信息系统的数据共享服务为背景,研究了WS-Security及以其为基础的WS-SecureConversation、WS-Trust等规范.结合SSL/TLS优势,设计了基于WS-*的Web服务安全模型,并在.NET平台上使用WSE3.0实现了该模型,对于数字化校园及企业信息集成的安全解决方案有参考价值.     

一种新型数据仓库体系的实现

针对当前流行数据仓库体系DB-DW存在的不足，引入ODS，构建起DB-ODS-DW数据仓库三层体系结构；并在分析当前通用数据仓库逻辑建模方法不足的基础上，提出将第三范式(Third Normal Form，3NF)和星型模式(Star-Schema)两种建模方法相结合来设计和实现DB-ODS-DW体系。     

数据仓库中异构数据的转换

在大多数信息管理中都存在模式和数据转换，且都是单独被研究。相信有统一机制，将中间件看成是转换引擎，并且讨论在什么时候进行转换如何进行转换。     

一种基于数据综合的智能搜索模型SMBDI

本文以语义Web中基于数据综合的应用为背景，提出了一种由本体论提供语义支持的智能搜索模型SMBDI．给出了该模型在底层数据综合、用户界面及查询处理等方面的实施策略。模型分析表明，该模型可以解决目前搜索方式存在的结果不完整或冗余度过高、存在大量无用信息以及数据格式不统一等问题，为语义Web在搜索及查询方面的应用提供了一种新的实现方案。     

A Data Model for Data Integration

Data integration systems provide a uniform query interface (UQI) to multiple, autonomous data sources [Alon Y. Halevy. Answering queries using views: A survey. The VLDB Journal, 10(4):270–294, 2001]. This paper presents the universal data model (UDM) that captures the semantically salient aspects of relational, entity-relationship, and XML data models. As a consequence, UDM — including its accompanying query language — provides a simple and elegant UQI for integrating data represented in some of the most widely adopted data models.     

基于J2EE和数据仓库技术的金融决策系统解决方案

本文介绍了一个基于J2EE框架和仓库技术的决策支持系统的解决方案。在后台数据库设计上,使用经典的星型模型建立多维数据集;在应用系统的设计上,采用了基于Struts的应用程序体系结构,利用MVC设计模式开发Web应用,使系统具备了灵活性、可重用性、可扩展性。     

一种基于本体的数据仓库开发模型

数据仓库开发过程中面临需求获取和异构数据处理两大难题，这两大难题的背后实际是人和人之间理解一致性以及机器和机器之间理解一致性的问题，以及一致性基础上的重用问题。本体是关于事物本质的模型，它为达到这两种一致性提供了坚实的基础，也为重用提供了坚实的基础。该文根据科学问题正确求解的两个核心问题——正确定义问题域和正确的求解手段，把本体分为领域本体和任务本体，在此基础上提出一种基于本体的数据仓库开发模型。这个模型具有过程视图和交流视图两个视图。     

金融领域基于本体模式的关联数据转换解决方案

提出了一个在金融领域范围内基于本体模式关联数据转换的解决方案。通过本体标注表现XML Schema与本体之间的关系,经过本体推理和匹配完成模式之间元素和路径的匹配映射关系,生成的XQuery脚本可以完成整个数据转换工作。     

关于数据仓库一种新型体系结构的探讨

针对当前传统数据仓库DB-DW两层体系结构存在的不足,本文引入了ODS(Operational Data Store)方法,构建起DB-ODS-DW数据仓库三层体系结构;并在分析当前通用数据仓库逻辑建模方法不足的基础上,提出将第三范式(3NF)和星型模式两种建模方法相结合,设计和实现DB-ODS-DW体系结构.     

大数据下的Web数据集成与挖掘研究

随着Web2．0技术的快速发展,社交网络、物联网、移动互联网等新兴服务行业日益涌现,Web数据呈爆炸式增长,成为炙手可热的“大数据”。Web大数据巨大的价值使得越来越多的人开始关注,如何获取Web数据并进行挖掘利用。在大数据的环境下,Web数据呈现出规模大、种类多、数据流高速性等特点,使得Web数据抽取与集成,数据分析,数据解释等方面的研究更加深入,与此同时,Web大数据的集成与挖掘仍存在着数据规模、数据多样性、数据时效性、隐私保护等方面的挑战。     

异构信息源集成系统的模式集成研究

随着社会的发展,越来越多的企业开始将工作重心向集成体系结构转移。因此,对异构信息源集成的要求是非常迫切并会长期存在下去。本文提出了一种基于Java的关系数据模型(JIDM)作为集成系统的公共数据模型。在该模型的基础上,介绍了全局模式、输出模式以及局部模式之间的映射关系,解决了JIDM模型与关系模型、XML文件以及面向对象模型之间的映射问题。     

一种基于证据理论和任务分配的DeepWeb查询接口匹配方法

针对已有查询接口匹配方法匹配器权重设置困难、匹配决策缺乏有效处理的局限性,提出一种基于证据理论和任务分配的DeepWeb查询接口匹配方法。该方法通过引入改进的D-S证据理论自动融合多个匹配器结果,避免手工设定匹配器权重,有效减少人工干预。通过对任务分配问题进行扩展,将查询接口的一对一匹配决策问题转化为扩展的任务分配问题,为源查询接口中的每一个属性选择合适的匹配,并在此基础上,采用树结构启发式规则进行一对多匹配决策。实验结果表明ETTA-IM方法具有较高的查准率和查全率。