数据仓库的数据抽取技术研究

介绍了数据抽取的几种技术,包括静态数据的捕获、通过日志文件捕获、通过数据库触发器捕获、基于日期和时间标记的捕获、在 源应用程序中捕获、通过文件的比较捕获。阐述了各种技术的优缺点,以及在实际环境中对各种技术的选择。     

PI数据库及其在电厂生产实时数据平台系统中的应用

介绍了PI实时/历史数据库的系统框架、基本组成、数据流程等信息,详细讨论了Pl数据库的各种数据发布技术的功能及优点,并结合某电厂生产实时数据平台系统实际,介绍了这些技术的应用效果,最后指出Pl的各种数据发布技术可以满足该系统在实施过程中遇到的各种需求.     

数据容灾系统的事件处理模型

数据容灾系统要求在各种可能的事件发生后仍然能够最大限度地保证数据的可用性。由于实际情况的多样性和复杂性,系统处理各种事件的逻辑往往异常复杂。在一个可实现的数据容灾系统中,采用了状态机来对事件进行处理,保证了事件处理策略的正确性和完备性,并且使不同的事件处理策略具有独立性和互换性。     

数据ETL工具通用框架设计

异构多数据源集成和数据清洗是将操作数据导入数据仓库过程中面临的两大挑战。从实践角度设计了数据ETL工具的整体框架，使用通用数据访问接口来屏蔽各种数据源之间的差异，并以数据清洗为主要目的，为消除多数据源的模式冲突和数据冲突提供了通用而有效的解决方案。     

基于多数据源的OLE DB

分布式系统中数据格式的多样化以及数据分布的分散性，导致了数据操作的复杂化，同时也对分布式系统的效率提出了更高的要求。0LEDB提供应用以统一接口标准，对各种数据源进行无差别的访问。OLEDB基于COM规范，在一系列可扩展维护的COM接口中封装了各种数据源操作，最大程度抽象出各种数据源的共有操作，屏蔽了其个体差异。文中较详细地分析了OLEDB的体系结构及其通用数据访问的主要特点，提出了一种OLE DB的实现方式。     

基于EAM系统的核电厂数据导入方法

数据作为企业信息化的重要组成部分, 历来在大型的企业级系统软件实施过程中占据关键的位置。立足于核电厂EAM项目AS产品的实施背景, 通过数据源模型重构、模型间数据映射和视图导入程序开发等方法高效、准确、低成本的解决了企业级系统数据导入过程中存在的各种问题, 对于ERP等大型的企业软件数据导入工作也具备指导价值。     

异构分布式数据库系统中数据语义不一致问题的一种解决办法

本文提出了一种异构分布式数据库系统中数据语义不一致问题的解决办法。该方法能适用于各种应用环境，综合考虑了属性集成、复合域、空值和多源数据问题，且能对用户提供完全的数据分布透明。     

基于多数据源的OLE DB

分布式系统中数据格式的多样化以及数据分布的分散性,导致了数据操作的复杂化,同时也对分布式系统的效率提出了更高的要求。OLE DB提供应用以统一接口标准,对各种数据源进行无差别的访问。OLE DB基于COM规范,在一系列可扩展维护的COM接口中封装了各种数据源操作,最大程度抽象出各种数据源的共有操作,屏蔽了其个体差异。文中较详细地分析了OLE DB的体系结构及其通用数据访问的主要特点,提出了一种OLE DB的实现方式。     

数据黑洞的暗能量

企业中各种数据仓库中的数据内容、质量、定义和结构和数据仓库本身一样变化莫测。这样的企业已经掉进了一个“数据黑洞”中，数据碎片在数据仓库的黑洞中发挥着它的暗能量。     

提高CMOS数据安全性的措施

现代微机系统的各种配置信息均存入ＣＭＯＳ芯片中，本文通过对ＣＭＯＳ数据定义的分析，着重讨论了各种破坏ＣＭＯＳ数据的手段与机理，并给出了提高ＣＭＯＳ数据安全性的方法。     

数据复制系统的主端IO策略研究

在数据复制系统中,主端IO策略必须在保证主端数据视图一致性和从端数据一致性的同时,提高主端请求响应速度。针对已有的主端IO策略中存在的各种缺陷,设计并实现了并行IO策略。在该策略中制定了五条规则,通过按照请求提交的顺序来返回请求成功及更新日志控制信息,保证了主端数据视图一致性和从端数据一致性的要求,同时它对请求进行了并行处理,大大提高了主端IO效率。     

通用数据转换平台研究与实现

针对数据集成中各种数据异构问题而产生的数据转换需求,提出了基于面向图编程的数据转换过程模型,设计并实现了一个基于Java和SWT技术的通用数据转换平台。同时也对系统的体系结构和具体实现如转换节点设计和数据转换引擎等关键部分进行了论述。     

大数据背景下个人支付数据信息利用

大数据时代的到来,让一些本无价值的数据信息能够发挥出较大的作用,因此各行各业在实际工作开展中,基于大数据时代发展的优势,加强了对各种数据信息的收集和分析,同时也让各种数据信息规范、合理、有效的运用成为人们所关注的焦点.文章基于此展开分析,先简要阐述了大数据背景下个人支付数据信息利用的现状,并基于个人支付数据信息利用中存在的不足,分别从法律建设、行业规范、工具建设、宣传教育以及机制建设等五个层面提出优化个人支付数据信息利用的策略,期待能够对相关从业人员有所启发.     

数据清理综述

由于各种原因 ,数据中存在这样或那样的脏数据需要清理 (净化 )。特别是数据仓库、KDD及TDQM(综合数据质量管理 )中 ,必须对数据进行清理。介绍了数据清理的有关内容、技术与实现方案 ,着重介绍了目前的两个重点研究、应用内容 :异常发现与记录重复     

ASP.NET页面之间数据传递的实现

探讨了ASP.NET设计中常用的Web页面间数据传递的实现方式,分析了各种数据传递方式的使用方法、使用场合及优缺点,对开发基于Web的数据传递有很好的借鉴之处。     

大数据一定需要大投入吗？

也许,采用敏捷型大数据技术的公司可以是各种规模的企业,通过中等的投资,就可以从大数据技术中受益。     

基于XML的高校异构数据集成系统的设计与实现

在比较当前各种异构数据集成技术的基础上．对某高校信息化建设中各部门数据之间缺乏共享问题进行了分析并提出新的需求。采用XML与中间件技术设计并实现一个具有良好独立性和可扩充性的性异构数据集成系统．有效解决了某高校信息化建设中的异构数据集成问题,提高了不同部门之间协同工作的效率。     

NOAA/AVHRR数据的雪盖信息提取与复合

在对NOAA/AVHRR数据特征与雪冰波谱特性分析的基础上，对各种提取雪盖信息的方法进行了比较，指出了各种方法的优劣，认为在实时的雪灾监浏与评估系统中，直方图分割的方法快速有效。另一方面，通过雪盖影像与GIS中各种矢量图形的复合配准实验，指出宜先对AVHRR影像进行点位计算，然后利用控制点、进行精校正，所产生的图像才能达到与矢量图形的准确配准。     

基于PB进行数据库与外部数据交换研究

当不同的数据库管理系统之间的数据实现共享或非数据库中的数据(如Word表格中的数据)与数据库中的数据实现共享时,就要进行数据交换,本文主要研究基于PowerBuilder进行数据库与外部数据交换的各种技术。在建立数据仓库时,数据仓库中的数据来源于各种不同的数据库管理系统和外部数据源,首先也要解决数据交换问题。本文中的这些技术也可以应用在数据仓库建设的ETL过程中。     

．NET框架下数据库访问的研究

.NET环境中为数据库的编程提供了很多工具和方式,如ODBC,DAO,OLE DB,ADO和ADO.NET.究竟采用何种方式访问数据库,主要依赖于用户的不同需求.在简单对VC++.Net中提供的访问数据库的几种方法原理介绍的基础上,对各种方法进行了分析和比较,以利于程序设计者在开发软件时选用合适的方案.