应用元数据开发数据映射辅助工具

数据映射在数据仓库项目中扮演十分重要的角色,它是ETL开发的前提条件,也是ETL开发过程中详细设计的一部分。本文在中国太平洋保险公司(CPIC)建设企业数据仓库(EDW)的项目背景下对企业数据仓库中的元数据应用作了研究,记述一个简单的元数据驱动的数据映射工具的开发过程,以说明元数据对数据集成工具开发的重要性。     

开放数据的元数据映射技术途径

在分析目前主要开放数据元数据标准规范文本的基础上, 整合几种常用元数据标准规范描述的开放数据,构建开放数据核心元数据字段映射表, 为跨平台开放数据共享提供一种解决途径. 通过提取元数据映射所需的指标字段, 并分别用JSON和XML格式表达映射数据. 采用开放数据元数据映射, 将不同元数据标准描述的开放数据纳入到同一个框...     

基于主题映射元数据的异构数据库集成仿真

传统异构数据库集成过程存在数据映射主题不明确问题,导致数据集成资源利用率偏低,切耗时较长。为此提出基于主题映射元数据的异构数据库集成方法。将待查询领域本体与元仓库组建映射,形成主体映射元数据,通过主体映射元数据解决数据库异构问题,并对用户查询进行推理扩展,实现对不同数据库集成。实验结果表明,所提方法能够有效提升数据库集成后的资源利用率,减少数据库集成时间。     

数据集成中间件系统中元数据管理的设计与实现

本文介绍了元数据的概念并从分布式异步数据集成的需求出发,指出了数据集成中间件使用元数据技术的必要性,并阐述了元数据管理的设计与实现过程。     

异种数据集成工具的数据对象及映射关系研究

以现有的数据抽取转换导人工具为基础，以自行开发的基于网络的异种数据集成工具为背景，介绍了该工具的框架。结合该工具特点，论述了工具中数据对象的元数据描述，并深入探讨了工具中复杂的源／目数据映射关系的表示和实现，最后根据具体实例来讨论映射关系表示和实现的特点。     

基于元数据的对象关系映射研究

持久化框架较好地解决了关系型数据库的对象持久化问题,对象关系映射是持久化框架的核心内容。参考MOF标准,本文设计了面向对象和面向关系的元数据模型,在分析属性映射和关系映射的基础上,介绍了基于元数据的对象关系映射,最后讨论了利用XML技术的实现。     

数据集成中间件系统中元数据管理的设计与实现

本文介绍了元数据的概念并从分布式异步数据集成的需求出发,指出了数据集成中间件使用元数据技术的必要性,并阐述了元数据管理的设计与实现过程.     

虚拟数据中心的数据映射与数据路由策略研究

数据中心基础数据积累通常使用三种手段:1)ETL技术;2)数据联邦技术;3)中间件技术.但三种技术侧重各有不同,不能同时满足数据集成的持久性与可用性.结合技术优势提出数据虚拟整合,为解决数据虚拟异构数据模型间的数据转换问题,通过对数据虚拟的分析,提出了一种基于元数据驱动的数据虚拟系统体系结构.构建了用于描述和存储映射策略的支撑元模型,并建立了相应数据路由策略.提出了对等主键思想,降低了处理阻抗.     

基于元数据的分布异构数据集成研究

将“虚拟法”和“数据仓库法”结合,通过统一的数据交换中心解决数字气田分布异构数据集成问题。建立包含全局模式和全局-局部映射的元数据字典,屏蔽异构数据细节,由此解决异构数据的各种冲突。提出一种由分布数据源的局部模式归并建立全局模式和映射表的算法,以提高模式集成的自动能力。     

异种数据集成工具的数据对象及映射关系研究

以现有的数据抽取转换导入工具为基础,以自行开发的基于网络的异种数据集成工具为背景,介绍了该工具的框架.结合该工具特点,论述了工具中数据对象的元数据描述,并深入探讨了工具中复杂的源/目数据映射关系的表示和实现,最后根据具体实例来讨论映射关系表示和实现的特点.     

数据仓库系统中的元数据管理

人们对数据分析的要求的不断提高导致了数据仓库的发展,而在建设数据仓库的过程中元数据管理起着至关重要的作用。详细而准确的元数据对于数据仓库的创建、数据加载、运行维护、清理脏数据等工作都必不可少。文章在对数据仓库系统中的元数据以及元数据管理进行全面分析的基础上,较为详细地介绍了笔者自行开发的数据仓库系统SEUwarehouse中的元数据及其管理的设计与实现。     

数据仓库元数据管理模式的分析与比较

介绍了典型的元数据管理策略,并对三种元数据管理模式进行了详细的分析与比较;最后提出了一种分布式的元数据管理模式。     

多年冻土元数据标准研究和应用

元数据标准不仅是规范管理数据资源、实现数据资源最大化共享的基础,同时也对多种类型数据的入库过程进行一定程度的约定和规范,以确保数据的全面性和准确性。因此,基于不同学科的数据特点,在元数据标准建立的基础上,构建各学科数据库和数据信息平台,以确保科学数据的最大化利用。根据多年冻土及其主要环境因素的数据特点,以地理信息元数据国际标准ISO 19115为模板,参考生态、资源环境、气象和地质等元数据标准,确定了冻土元数据标准编制原则,并较为详细地阐述了冻土元数据实体包之间的层级关系和组织结构、内容及特点。并在此元数据标准基础上,实现了“青藏高原多年冻土本底调查信息系统”。通过本项工作,期望能够进一步促进冻土数据管理和共享。     

数据仓库中的元数据

数据是数据仓库的基础,而元数据和访问元数据的工具决定着用户利用数据仓库中数据的能力。本文研究了元数据的收集、维护和配备,简要介绍了其与数据访问工具集成的几个层次。     

数据仓库元数据管理研究

元数据管理是数据仓库技术研究的重点，该文首先对于数据仓库元数据管理的前提－元数据组成及分类进行了探讨，其次就数据仓库元数据管理系统应具备的功能进行了深入的研究，基于对元数据管理系统功能的研究，文章提出了一种邦联式的数据仓库元数据管理体系，同时给出了一种元数据库系统结构，指出了数据仓库元数据管理下一步研究工作的重点。     

数据仓库中实时元数据管理的研究

提出一种实时分布元数据管理的软件体系结构。结构基于公共仓库元模型（CWM）规范,以CWM元模型规定元数据集成、交换内容,XML元数据交换（XMI）提供实时元数据交换和共享机制,仅需一个接口驱动程序,即可实现对应分布元数据的动态读取。原型实验已验证了体系结构对元数据互操作和实时分布存取的可行性和有效性。     

数据仓库中的元数据与CWM规范

Metadata plays a very important role in data warehouse. Metadata helps developers and administrators develop, maintain and manage data warehouse, it also helps end users understand, acquire and analyze data. In this paper contents and functions about metadata are introduced,and CWM specification advanced by OMG is discussed.     

构造数据仓库系统的元数据

元数据的定义和管理是实现数据仓库系统的一个难点。论文讨论了数据仓库系统中元数据的内容和作用,介绍了Microsoft公司为实现元数据的管理而推出的Open Information Model和Microsoft Repository等工具。在文章最后,介绍了利用以上模型与工具所建立的一个元数据管理系统的实例。