一种通用的数据质量评估控制元数据模型

为解决传统数据质量评估实现方式灵活性与通用性较差的问题,通过对元数据应用与数据质量评估体系的研究,重点分析了元数据在数据质量评估过程中的作用、数据质量评估维度与评估算法;确定基础元数据、评估控制元数据与评估算法元数据,并构建元数据模型.通过实际应用证明模型具有良好的灵活性与通用性.     

元数据驱动的数据质量评估体系架构研究

到目前为止,国际上既没有形成系统化的数据质量评估标准,也没有建立完整的数据质量评估体系。通过对国际和国内数据质量相关内容的研究,分析了大型企业对数据质量的需求,提出了一个数据质量元模型框架结构,构建了数据质量评估体系。该体系包括数据质量的分类和定义、数据质量评估指标算法和数据质量评估体系及流程,为企业对数据质量进行评估提供了可靠的依据。     

通用数据质量评估模型及本体实现

随着数据科学技术在各个领域的深度应用,作为企业重要资产的数据越发表现出它的价值性与重要性.绝大多数企业结合行业特点开发了数据质量检测系统来解决自身数据质量问题.这些系统的评估模型各有特点,对于数据质量维度的定义也是各有千秋.试图将这些模型与数据质量维度以一种通用的形式来定义,旨在成为企业研发数据质量评估系统的标准.通过分析国内外学者在该研究领域取得的成果并结合常年研发数据质量检测与评估系统的经验,首先,提出了一个通用的数据质量检测与评估的数学模型;接着,以此模型为基础,采用本体技术定义了从该通用的数据质量评估数学模型到本体模型映射的转换规则;随后,考虑到多数数据存储在关系数据库中,因此以关系数据模型为例,依据所提出的数学模型和转换规则实现了对数据质量评估本体的抽取与构建,该模型实现了复杂质量规则的定义,具有规范性,实现了对不同来源、不同格式的数据质量进行检测与评估;最后,结合中国石油的油田开发数据质量评估项目进行了系统的实现,验证所提出模型的正确性、科学性、合理性以及可扩充性等.由于所提出的数据质量检测与评估模型与领域无关,所以它具有通用性.     

基于元数据的仿真数据质量研究

仿真数据是仿真系统重要组成部分,仿真数据质量直接决定着仿真系统的质量。为此,首先在研究仿真数据质量的基础上,对作战仿真数据进行分类并分析了仿真数据质量存在的问题;进而探索用于改进和提高仿真数据质量的途径,提出利用元数据来提高仿真数据质量的策略;研究了元数据的设计方法,并利用统一建模语言(Unified Modeling Language,UML)图描述了数据值元数据;最后在研究基础上提出了初步的基于元数据的数据管理系统结构和功能要求。     

数据质量评估方法研究

数据质量管理已经成为当今数据管理的关键问题,并得到了广泛的研究和应用。数据质量评估作为数据质量管理中的必要过程和基础部分,目前缺乏一种定量的系统的方法。针对数据质量评估中的这一问题,该文介绍了一些基本的数据质量评估指标,提出了一种数据质量评估模型,并阐述了该模型的构造技术和计算方法。     

基于元数据的通用数据维护框架设计

针对数据维护程序代码重复、对需求变化适应性差等问题,提出一种以数据库表的元数据为核心的通用数据维护框架。该元数据模型能描述表之间的一般关系和基于面向对象的继承关系。框架实现了数据操纵SQL语句和数据维护程序界面的自动生成,并能自适应表结构的变化。实际应用验证了该框架的可行性和高效性。     

面向企业信息化的数据质量评估研究

数据质量问题是企业信息化过程中面临的一项重要挑战,但针对数据质量评估的研究还缺乏足够的重视.文中从数据质量定义出发,阐述了数据质量的各个不同维度及其评估指标的确定,在对比分析已有成果的基础上给出了主观、客观两种评估方法,通过引入SOA上下文的可重用服务思想,设计了一种数据质量评估的服务框架,基于该框架对输入输出、流程管理、自动化评估等服务进行了阐述,并使用Web Services服务组件的形式实现了所有的功能需求.     

数据ETL软件中元数据模型设计与管理

元数据(Meta Data)是用来描述应用中数据结构的数据或文档,即关于数据的数据,处在数据ETL系统的核心位置。分析了元数据在ETL中的作用,设计了元数据模型,提出了元数据管理系统的设计原则和步骤,使其具有广泛的适应性、很好的扩展性和可重用性。     

基于Android的ECG数据质量评估系统

ECG数据质量评估和控制是确保便携式心电图仪等远程人体健康监测设备准确性和有效性的关键。以基于Android的智能手机为运行平台,设计和实现了一个ECG数据质量评估系统。该系统通过蓝牙技术与便携式心电图仪通信,采用简明的规则库机制对ECG信号质量进行实施评估,集成了XML文件和二进制文件方式对ECG信号及其元数据进行管理。     

基于元数据的数据整合平台

针对数据资源整合的共性问题,提出了一种基于元数据、结合Web服务与本体技术的数据资源共享与整合平台的实现框架(MDDI).重点讨论了基于JavaCC设计与实现的元数据自动抽取与转换工具,该工具把与各平台相关的元数据自动提取并转换为与平台无关的元数据,实现了基于元模型的元数据集成,为最终实现数据的共享和整合奠定了基础.     

面向广义质量体系的软件质量贝叶斯评估模型

现有软件质量评估模型主要关注软件系统的基本质量特性,缺乏考虑顾客价值特性和开发商组织管理特性,不能全面和科学地评估软件系统质量.文章以贝叶斯网络刻画了广义质量特性变量间复杂依赖关系,构建了更有针对性的软件质量量化评估模型.应用实例表明,该模型能综合考虑软件系统广义质量特性,对软件质量作出合理评价,并能依据贝叶斯网络的反向推理功能找到影响软件质量的关键因素.     

一种基于元数据的数据自动提取方法

文章以高校招生数据提取为例,分析了高校招生数据的特点,设计了元数据表.通过程序从元数据表自动生成表间连接条件,动态生成结构化查询语句,实现了高校招生数据的自动提取.结果表明该方法具有操作简单、高效等特点.     

基于元数据的地下水数据共享

地下水数据共享平台是一个分布式面向网络的系统。采用元数据集中管理、数据体分散存储的策略可以共享分布异构的地下水数据资源。基于RDF/XML框架定制地下水元数据,使得地下水元数据可以与其他元数据标准进行交换,同时可以方便地对其进行扩展。以元数据为核心,以数据汇交—数据查询—数据浏览下载为主线,设计了地下水数据共享平台的功能。在J2EE环境下,实现了地下水数据共享平台,其中空间数据服务采用空间服务元数据和ArcIMS相结合的方式实现。     

应用元数据开发数据映射辅助工具

数据映射在数据仓库项目中扮演十分重要的角色,它是ETL开发的前提条件,也是ETL开发过程中详细设计的一部分。本文在中国太平洋保险公司（CPIC）建设企业数据仓库（EDW）的项目背景下对企业数据仓库中的元数据应用作了研究,记述一个简单的元数据驱动的数据映射工具的开发过程,以说明元数据对数据集成工具开发的重要性。     

应用元数据开发数据映射辅助工具

数据映射在数据仓库项目中扮演十分重要的角色,它是ETL开发的前提条件,也是ETL开发过程中详细设计的一部分。本文在中国太平洋保险公司(CPIC)建设企业数据仓库(EDW)的项目背景下对企业数据仓库中的元数据应用作了研究,记述一个简单的元数据驱动的数据映射工具的开发过程,以说明元数据对数据集成工具开发的重要性。     

基于元数据目录服务的地理空间数据共享

在元数据标准的基础上,通过论述元数据目录服务的框架结构以及建立在元数据目录服务基础上的GIS Portal的模型,为更好的数据共享提供解决方案,使得用户能够快速准确地获取所需地理空间数据。     

基于银行数据仓库的元数据管理系统

元数据在银行数据仓库中具有重要意义。讨论元数据的分类和作用,分析元数据的管理功能,给出一种基于银行数据仓库的元数据管理系统,对其结构进行分析和说明。实践结果表明,该系统可以加强对数据的分析和管理能力,提高银行数据仓库等决策系统的灵活性和可扩展性。