基于ETL的金融数据集成过程模型

为了将频繁产生的分布在世界各地的金融数据按需地高性能集成,提出了基于ETL(extract-transform-load)的金融数据集成过程模型.对规则引擎原理进行了研究,建立了基于业务转换规则的插件式扩展实现可复用可定制的业务转换过程.利用事件驱动的交互模型和元数据映射保证非结构化和半结构化数据之间无差异集成,采用增量式数据处理解决数据集成中棘手的性能问题.通过实践项目的验证,对比传统数据集成方法和该过程模型,验证了该过程模型的有效性.     

一种结构化数据和半结构化数据的统一集成模型

结构化和半结构化数据的统一集成和访问是目前Web数据访问中急需解决的问题。文章提出了一种半结构化数据表示模型———层次数据图(HDG),给出了结构化数据向HDG的转换方法,并就不同结构HDG的统一集成问题进行了探究。     

基于XML的数据交换与共享方案设计

XML本身具有与平台无关、易于扩展、自描述、语义性强等特点,能方便地描述结构化或非结构化的数据,而成为异构数据集成中描述公共模型的最好选择。基于XML数据模型,根据目录服务的思想,采用P2P技术进行信息资源的集成与管理,并据此设计一个异构数据交换与共享系统的方案。     

基于Web的数据整合与发布系统的设计与实现

根据对企业中数据存储多样化与数据模式的分析，设计并实现了一个应用集成的、高效的、基于Web的数据整合与发布系统．该系统很好地解决了企业中结构化数据与非结构化数据的综合应用，并且集成了重要的企业应用。     

基于新闻文本的上市公司财务困境组合预测模型

已有上市公司财务困境预测模型主要是基于结构化数据进行研究,为进一步提高上市公司财务困境预测模型准确率,本文将非结构化数据引入上市公司财务困境预测问题中,研究了基于新闻文本分类的上市公司财务困境预测模型,结合新闻文本信息和财务信息提出上市公司财务困境组合预测模型。本文首先将新闻数据进行预处理,然后基于新闻文本数据通过支持向量机（SVM）进行财务困境预测,同时基于财务数据通过Logistic模型进行财务困境预测,最后采用阈值表决集成策略整合两种模型的预测结果,实验结果证明了模型的有效性。     

基于XML网络测控系统数据集成研究与应用

可扩展标记语言(Extensible Markup Language,XML)是一种与平台无关的结构化数据模型.针对网络测控中各子系统的数据异构问题,研究了基于XML的网络测控数据集成模型,讨论了基于该模型的数据转换和传输过程,解决了测控数据之间的无缝连接和互操作性等问题.     

异构政务信息资源集成检索技术研究

复杂政务信息资源的开发与利用成为制约智慧城市建设的重要因素。基于政务信息资源条块分割的现状,以信息检索为核心提出面向城市多级政务应用的信息集成检索方法。针对异构政务信息资源整合的要求,引入大数据、社交网络等技术理念重构政务信息资源的基础模型,建立非结构化、结构化两类数据的集成检索框架。对所述方法进行了原型验证,实验仿真结果表明了该算法在大数据并发环境下的有效性。     

利用XML技术解决Web数据挖掘中数据异构的问题

讨论了Web数据挖掘中的数据异构问题,通过XML技术建立了一个半结构化数据模型和一个自动抽取模型,以解决Internet上绝大多数因异构、非结构化、动态数据集成问题所导致的Web数据挖掘的困难。     

HyDB:集成MapReduce和数据库的高效SaaS架构

随着数据的快速增长和云计算的兴起,软件作为服务(SaaS)标志着计算机系统按需服务的应用的兴起.高效经济SaaS使得许多企业将大规模数据分析服务从部署在并行数据库的高端服务器转移至更便宜的无共享体系结构的低端服务器集群上.论文提出了集成MapReduce和数据库的高效经济SaaS架构—HyDB系统,解决海量结构化,半结构化与非结构化数据的高效查询服务,通过对数据的存储模型和查询模型进行研究,提出了完整的数据存储和查询服务方案,给出基于队列的作业调度算法,并支持针对简约数据查询的快速响应模式.最后通过可扩展实验,证明了该系统架构具有良好的加载性能、查询性能和容错能力,可以为用户提供优质的数据服务.     

基于CWM的结构化异构数据抽取方法研究与实现

传统的信息集成虚拟方法通常采用Wrapper技术实现结构化异构数据的抽取。针对Wrapper与结构化异构数据源间一对一关系的非灵活性,提出了一种基于公共仓库元模型CWM（Common Warehouse Metamodel）的信息集成架构,利用CWM独立于任何具体实现的优势,在其基础上生成的Wrapper程序可以很好地适用于与之相关的所有结构化异构数据源的抽取。CWM元模型所提供的统一文档类型定义（DTD）,使结构化异构数据源拥有了统一的XML表达方式,从而使抽取后的信息可以进行更有效的共享和转换。     

基于GML的多源异构空间数据集成研究

深入分析了数据格式转换、直接数据访问和数据互操作3种数据集成模式,描述了一个基于GML数据互操作模式的、多源异构空间数据集成模型,并分析了模型的运行机制和关键技术.该模型通过使用相应的GML转换接口把分布式异构空间数据源转化为统一的GML格式文档,通过集成引擎和相应的集成规则对异构空间数据进行有效的集成,实现数据共享的目的.     

基于OGSA-DAI的数据集成模型研究

随着网格技术应用研究的发展,网格计算环境下数据库访问和集成现成为研究热点。以OGSA-DAI和异构数据库集成技术为基础,概述了数据集成的关键技术,提出了基于OGSA-DAI的数据集成模型,重点讨论了模型的体系结构、数据集成的步骤和实现方法,并以开发的基于此模型的虚拟数据库作为应用实例,验证了所提出模型的有效性。     

基于本体的异构数据集成框架

针对电力系统数据集成中存在的语义异构问题,提出一种基于本体的数据集成框架。依据电力参数估计系统的数据需求模型,分析数据集成存在的语义冲突类型,在传统数据集成框架的数据集成中间件模块中加入本体语义描述模块。采用本体描述信息资源域中的概念,通过实现语义冲突主动发现并构建语义映射关系。实验结果表明,该框架能有效解决数据集成过程中的语义异构问题。     

基于事件驱动的柔性数据集成研究

企业应用集成(EAI)往往开发周期过长，过程复杂，而一般的企业数据集成仅在数据层面简单地集成，为了高效地集成和共享企业数据，可采用基于事件驱动的柔性数据集成模式。系统以总线方式架构在企业原有信息系统之上，可根据业务需求柔性定制集成任务，包括事件管理器、集成作业管理器和数据适配器。并使用Java技术开发了基于事件驱动的数据集成体系架构的原型系统。适用于那些对灵活性和扩展性要求较高的，具有不同形式的遗留信息系统的数据集成。     

基于元模型的企业应用集成方法研究*

针对定制化集成接口方案难以适应日趋动态的企业应用集成环境的现状,提出了基于元模型的企业应用数据集成方法,定义了数据集成接口定义元模型,并用XML描述了该模型的构成。建立了基于元模型的企业应用数据集成过程模型,开发了通用的数据转换组件,并在某集团企业多级质量管理系统上下两级异构系统之间的数据集成中进行了应用验证。     

基于XML虚拟数据库的异构数据源集成模型研究

解决企业数据源异构需要一种公共的数据源模型给用户提供统一的用户视图,XML以其所具有的自描述性、灵活性、强大的数据交换能力等优势克服了其他数据模式的缺点。结合当前数据集成方面的技术,提出了一种基于Ⅺ∥几虚拟数据库的异构数据源集成模型,该模型很好地解决了异构数据源集成方面存在的一系列问题,并从数据模型和数据交换上阐述了该模型的可行性。剖析了该模型中的模式集成、异构数据集成视图、全局查询等。介绍了该模型在中国石油、QHSE信息系统中的成功应用。     

流程工业MES中的数据集成研究及应用

MES是流程工业综合自动化系统的关键环节。数据集成是MES中的基础。如何实现在异构网络、异构操作系统、异构数据库等异构环境中的数据集成是系统集成中的难点。该文提出了一种基于实时数据平台的集成模型，并应用于实际系统集成中，取得了比较满意的效果。     

基于Web服务的敏捷供应链数据交换技术研究

分析了基于Web服务的敏捷供应链信息系统集成框架,在此基础上讨论了基于统一数据规范实现数据交换的流程,提出了基于Web服务的数据交换平台模型。并指出了应建立敏捷供应链信息数据交换规范,以便实现数据交换平台,完成企业间的数据交换,从而方便敏捷供应链的动态集成。     

基于Web服务的敏捷供应链数据交换技术研究

分析了基于Web服务的敏捷供应链信息系统集成框架，在此基础上讨论了基于统一数据规范实现数据交换的流程，提出了基于Web服务的数据交换平台模型。并指出了应建立敏捷供应链信息数据交换规范，以便实现数据交换平台，完成企业间的数据交换，从而方便敏捷供应链的动态集成。     

基于XML的异构数据集成模式的研究*

首先介绍了企业异构数据集成技术产生的背景、研究目的以及相关概念、技术和方法;提出了一种基于四层架构的企业数据集成模型框架,阐述了该数据集成模型的优越性;介绍了以XML为基础的异构数据集成的思想和实现框架,详细介绍了该框架提供的服务功能及实现的关键技术.