异构数据集成系统的应用模式与技术实现

随着Web的不断发展，出现了许多新的数据形式，如何将这些异构的数据集成起来，已成为当前一个十分热门的话题。首先介绍了数据异构性的主要表现、集成难点；然后简单介绍了目前异构数据集成的一般框架，最后提出了一种基于XML的异构数据集成方案。     

基于对等网的异构数据集成系统的研究

鉴于目前异构数据集成系统中存在的数据信息实时同步和双向交互的问题，以及对等网技术的动态发现和交互通信的优点，以构造点对点式数据集成系统、提高数据集成系统的实时交互通信为出发点，文章提出一种基于对等网的异构数据集成系统架构。该体系架构建立了数据集成对等组，通过管道通信以及通告发布等关键技术实现了异构数据对等体间的数据交换，使协同性大大增强，异构数据对等体间的交互通信速度得到提高。     

基于插件的安全数据处理框架及实践

本文提出了一种海量安全数据统一采集处理分析框架及方法，采用大数据、流数据插件和机器学习等多种技术，创新性地实现对异构分散的数据进行多源异构适配、实时流式分析、动态解析和关联计算处理，满足了数据实时处理入库的需要，并通过实践为安全运营工作提供了重要数据支撑。     

一种基于JSON的异构数据查询方法

异构数据的查询是近年来研究的热点,用户不能同时对异构数据进行查询。提出一种基于JSON的异构数据查询方法,该方法以JSON传输格式为基础,为不同设备端提供访问异构数据源的接口,使JSON作为统一的模型对异构数据进行编写。使用JSON格式的数据查询方法可以为用户节省流量成本,同时简化了对异构数据的查询问题。理论分析和实验结果证明基于JSON的异构数据查询算法具有高效、稳定的优势。     

基于本体映射的异构数据集成中间件HDIM研究

数据集成是为了消除企业内部信息孤岛,实现企业之间信息共享,实现异构数据透明访问的问题。为了解决异构数据集成问题,提出了基于本体映射的异构数据集成中间件——HDIM,采用本体明确、规范地描述数据的异构性、分布性,采用本体映射实现本体之间的互相访问。为用户提供一个访问异构数据源的中间平台,解决企业内部的异构数据集成问题。     

基于solr的异构数据融合检索技术

针对企业异构数据融合检索的需求,介绍了异构数据整合的常用方法和企业级搜索服务器solr的基本功能,结合xml异构数据整合、中文分词技术和友好的用户界面搭建了基于solr的异构数据融合检索系统,实现了对xml文件的索引和检索,为异构数据融合检索提供了解决方案。     

基于异构数据集成方法实现电子看板系统应用

随着Internet的飞速发展，数据资源的共享成为一个热门话题。如何获取自治、异构、分布的数据并加以综合利用，即数据集成，成为一个引起广泛关注的研究领域，本文通过建立一种针对异构数据源的数据集成方法来实现这一问题，并基于这种方法来完成聚银公司的单元成本电子看板管理信息系统。     

异构数据源统一查询技术的研究

本文提出一种新的异构数据查询技术，该技术可以有效地对异构数据进行统一查询，从而避免了传统数据集成中语义转换的问题，提高了查询效率，在理论和实践中具有广泛的应用价值。     

基于虚拟数据库技术的异地异构数据源整合

传统异地异构数据的整合方法存在查准性能差的问题,文中为此提出基于虚拟数据库技术的异地异构数据源整合方法。构建虚拟数据库异地异构数据的传输负载模型及数据存储结构,提取数据存储结构的稀疏性特征,并挖掘虚拟数据库异地异构数据的属性关联规则特征量,利用特征量融合异地异构数据的模糊信息,建立数据整合模型,实现虚拟数据库异地异构数据源整合。仿真结果表明,采用该方法进行虚拟数据库异地异构数据源整合时间的开销小,数据库的查准率较高。     

电力企业异构数据集成研究

整合异构数据源是电力企业提升信息化水平的必由之路,为了能够在企业各系统间实现异构数据的挖掘、分析、交互和共享,提出了一个电力企业异构数据集成平台,实现了企业内部异构数据接入格式、数据存储以及相关服务接口标准化的数据共享和交换服务.实际应用表明,该平台实现了各异构平台数据的共享与交互,为电力企业信息化奠定了坚实的基础.     

XML与异构数据转换技术探讨

提出了异构数据库数据转换的问题,对可扩展标志语言XML进行了简要的说明,介绍了利用可扩展标志语言XML文件作为中间数据存储文件进行异构数据库间数据转换的机制,并给出了通过文档对象模型DOM和XML规范Schema文档以及XSLT样式表文件进行异构数据库数据转换的实现方法。与传统的异构数据转换方法相比,本方法具有开放性、移动性、适应性、可扩充性以及易于维护等特点,应用前景更加广阔。     

数字化校园建设中异构数据集成研究与应用

基于IT技术发展的阶段性特点,网络上存在大量的异构数据库,原有的信息集成方案已经不能满足现代化的信息需求前提下,在研究异构数据集成的基础上,结合Java和XML的特点,提出了一个基于Java和XML的数据集成模型,为异构数据的集成应用提供了一个与数据库系统无关、与操作系统无关的简单方便的解决方案。采用Java和XML技术,根据这一模型开发的信息系统,实现了数据在不同数据库系统、不同网络平台、不同操作系统和不同开发语言的数据库中的应用集成。     

物联网系统异构数据的过滤及存储模型研究

针对物联网系统中海量的异构数据流影响数据处理效率的问题,提出一种结合RESTful WebService和MongoDB数据库的物联网系统异构数据过滤及存储模型。提出数据点的概念对设备节点的物理量进行抽象描述,通过对数据点存储状态的设置实现数据的过滤,同时采用内嵌文档形式对数据进行存储。该模型经过测试,可实现物联网系统中异构数据的选择性存储,并可有效提高数据库的存储效率及存储利用率。     

通用实时数据采集软件系统的设计与应用

企业信息化及各类生产管理需要采集大量的生产数据,采用标准OPC和.NET技术设计开发的通用实时数据采集软件系统,实现了将用户需求的各类数据从基础自动化系统采集到指定的数据库表中,同时,系统的可靠性、通用性、免维护性设计使系统获得了很好的应用。系统具有独创性,新颖性,具有较好的应用及推广价值。     

基于XML的电力数据集成平台研究

为了解决电力系统内部异构数据共享和集中管理的问题,提出基于“集成数据库-中间件”的四层电力数据集成平台框架设计方案。该方案结合可扩展标记语言XML的优势定义数据交换格式,参考HSDA视图的组织形式搭建集成数据库,通过查询转换器、数据合法性验证工具以及数据转换器实现对用户请求的中间处理,最终将转换得到的XML文件提供给Web服务器,实现电力数据集成平台系统。实践证明,该方案对异构数据集成问题的解决提供了一个切实可行的模式和方法,具有较好的可扩展性和适应性。     

异构数据库转换方法研究

分析了异构数据库及构成其异构性主要因素，研究了数据库问转换存在可能冲突，针对这种情况，本文提出了一种利用SQL Server 2000数据转换服务(DTS)来实现异构数据库间转换的方法．并总结出具体转换步骤，最后指出转换需要进一步研究的问题。     

Heterogeneous distributed database management: The HD-DBMS

The proliferation of different DBMS and advances in computer networking and communications have led to increasing heterogeneous distributed DBMS network scenarios. Major heterogeneity problems and challenges include: different database models, syntactically and semantically different DBMS, different types of controls (recovery, etc.), etc. We address herein the long-range goal for a heterogeneous distributed DBMS (HD-DBMS) to be able to support a network in which any user in any node can be given an integrated and tailored view or schema, while in reality the data may reside in one single database or in physically separated databases, managed individually by the same type of DBMS (by the only one the user understands) or by different DBMS. We cite the major approaches to data sharing and accessing: from the primitive commercial file and database unload/load and PC download, to common interfaces on top of existing DBMS, to the R&D and prototype efforts toward the long-range desires. Commercial availability of the more encompassing thrusts may become a reality with the mounting problems, opportunity costs, and demand for data sharing in the heterogeneous world. Major research and development projects in this arena are leading toward some partial attainment of the long-range objective. The UCLA HD-DBMS project is highlighted herein, with a presentation of its status, progress, and plans. It is a longer range project, with the unique feature of allowing any user in the network to use a preferred database model and DML to access or update any data in the heterogeneous network. HD-DBM5 is to provide a multilingual interface to heterogeneous distributed databases.     

UVDA:design and implementation of automation fusion framework of heterogeneous security vulnerability database

Security vulnerability was the core of network security.Vulnerability database was designed to collect,assess and publish vulnerability information.However,there was redundant and heterogeneous data in vulnerability database which leads to sharing difficulty of vulnerability information among vulnerability database.15 main vulnerability database with a total of 842 thousands of vulnerability data items were connected and analyzed.Based on text mining technology,a rule of removing duplicate form vulnerabilities whose accuracy rate was 94.4% and vulnerability database fusion framework(UVDA)were proposed.Finally,three representative vulnerability database were used to realize UVDA framework,which made the process fully automatic.The generated UVDA vulnerability database has been used in national security vulnerability database and can be retrieved according to uniform product version and date time,promoting the standardization process of vulnerability information release mechanism.     

基于Web Service的异构数据库的集成

分析了现有异构数据源的数据集成的方式,为了保持各数据源的自治性和满足数据查询的实时性,提出使用中间件体系结构的集成方案。介绍Web Service分布式计算模型及其特点,提出了一种基于Web Service技术进行异构数据源集成的方法。通过Web Service能将连接在Internet上的异构数据泺构建成一个虚拟的全局数据库,为用户提供透明统一的接口,从而实现异构数据资源的共享和整合。