共查询到20条相似文献,搜索用时 109 毫秒
1.
2.
3.
ETL过程是数据仓库获得高质量数据的重要环节,是任何数据仓库工程不可缺少的成功因素。为了便于ETL过程的设计和维护,降低ETL过程的设计、维护代价,提出一种基于结构图的ETL概念模型设计方法,给出一个用于描述ETL过程的模型,并基于CWM完成用以存储元数据的ETL元模型的设计。通过图形化ETL过程中的元素和关联,该模型清晰直观地反映了各个源数据库与目标数据仓库的内部结构和组成、数据的来源与流向、源数据和目标数据之间的映射和转换关系,辅助设计人员更好地进行ETL过程的设计和编码实现,使整个ETL的设计与维护过程更加方便、灵活、有效。 相似文献
4.
在阐述数据仓库技术的概念、原理、体系结构的基础上,具体描述了面向教育评价应用的数据仓库系统的需求分析、概念模型设计和逻辑模型设计,重点研究了运用Microsoft数据转换工具DTS设计数据迁移包,完成数据由业务数据库到教育评价数据仓库的抽取、转换、清洗和装载的过程。 相似文献
5.
基于结构图的ETL过程建模方法* 总被引:4,自引:1,他引:3
ETL是数据仓库获得高质量数据的重要环节,在数据仓库建设过程中占有极其重要的地位。为了便于ETL过程的设计、维护和修改,提出一种基于结构图的ETL过程建模方法,并依据该方法完成了ETL概念模型的设计。通过图形化ETL过程中的元素和关联,该模型清晰直观地反映了数据的来源和流向、源数据与目标数据之间的映射和转换关系,辅助设计人员更好地进行ETL过程的设计和ETL过程的编码实现,使整个ETL设计过程更加方便、灵活。 相似文献
6.
7.
水文信息系统中数据仓库的设计 总被引:2,自引:2,他引:0
数据仓库系统是存储大量历史数,据供分析和对决策进行支持的系统。描述了水文信息系统中建立数据仓库的过程,包括数据仓库模型设计、主题的确定、粒度和维的确定、异构数据的转换等内容。 相似文献
8.
一个轻量级数据仓库平台的设计和实现 总被引:3,自引:0,他引:3
提出了一个基于J2EE架构下的轻量级数据仓库平台的设计思想,并加以实现。该数据仓库平台包括元数据管理、数据抽取/转换/装载、数据清洗、在线分析和数据展现等在构建和使用数据仓库系统中所必需的通用功能。在该轻量级数据仓库平台的开发过程中,利用了不少优秀的开放源码软件并加以改造,这种开发模式不但能够加快开发过程,而且费用低廉。 相似文献
9.
ETL是构建数据仓库过程中极其重要的部分,点击流数据仓库无论在体系结构上,维表与事实表设计上,还是点击流的抽取、转换和装载机制上,都比传统的数据仓库要复杂的多。本文以ETL基本原理出发,构造ETL体系结构,着重分析点击流数据仓库的ETL技术,进行数据抽取,数据转换,以及数据装载的ETL设计,为ETL系统的开发和ETL技术的应用提供了依据。 相似文献
10.
ETL是构建数据仓库的一个非常重要的环节,可以这样认为:ETL就是整个数据仓库系统乃至整个决策支持系统的基石。如何设计高效的ETL过程就成为了众多计划或正在实施数据仓库项目的企业考虑的重要问题。从前期的数据理解阶段入手,分别讨论了数据的抽取、清洗转换、装载等不同阶段需要考虑的设计问题及相应的解决方案。提出了以数据理解为根基,以清洗转换为中心的设计思想,并给出了具体的实施步骤。 相似文献
11.
一种可靠的数据仓库中ETL策略与架构设计 总被引:18,自引:0,他引:18
作为数据仓库系统的关键部件,ETL完成数据抽取、清洗、转换和装载的工作,它是构建数据仓库的重要环节,同时也是构建数据仓库过程中出现问题最多的环节,所以针对这点,该文给出了一个可靠的同时易于扩展的ETL策略和架构。文章首先简单地介绍了数据仓库技术和ETL技术,包括ETL的相关概念、ETL在数据仓库中的功能和重要地位;然后重点介绍了这种ETL的具体策略和架构设计。 相似文献
12.
本文介绍了数据仓库和ETL技术的有关概念和内容,结合电信业务的特点,构建电信数据仓库的体系结构。在给出的电信数据仓库体系结构的基础上,深入的探讨了基于电信业务的数据仓库ETL和数据展现方法。 相似文献
13.
数据仓库系统中源数据的提取与集成 总被引:12,自引:0,他引:12
人们对数据分析的要求的不断提高导致了数据仓库的发展,而在建设数据仓库的过程中非常关键的一步就是从事务数据库或其它的数据源中抽取和集成原始数据。本文在对数据集成方法和数据获取中可能碰到的问题进行全面分析的基础上,较为详细地介绍了我们自行开发的数据仓库系统SEUwarehouse中源数据提取与集成工具的设计与实现. 相似文献
14.
通过对元数据建设和维护及其管理系统结构的深入研究,提出一种基于元数据驱动的企业级数据仓库系统架构。该系统架构采用关系模型数据结构,并通过元数据接口和元数据驱动引擎的设计开发将数据仓库中各模块的反馈信息与其元数据存储进行交互,实现由元数据驱动数据仓库系统的运作机制,解决了一直以来元数据难以更新维护、数据质量检查效率低的问题,提升了对企业级数据仓库的管控能力。 相似文献
15.
介绍了数据仓库的基本概念和系统结构,对数据仓库在教学管理信息系统中的应用作了研究与探讨。针对教学管理信息系统中的数据特性,重点分析了数据仓库的模型设计和数据挖掘过程,尝试了基于数据仓库技术的教学管理信息系统的具体建设,对教学评价具有一定的指导意义。 相似文献
16.
一种基于税务系统数据仓库的模糊数据挖掘算法的研究 总被引:3,自引:0,他引:3
文章简要的叙述了数据仓库的概念、数据仓库结构、数据挖掘的定义和方法,并提出了一般的基于数据仓库的数据挖掘系统的结构。并针对税务系统的数据仓库提出了一种模糊数据挖掘算法。 相似文献
17.
地理信息数据仓库技术的研究 总被引:4,自引:0,他引:4
在描述地理信息系统(GIS)功能特点和数据仓库技术的基础上,给出了GIS数据仓库的体系结构,并讨论了实现GIS数据仓库的关键技术。 相似文献
18.
基于数据仓库的保险管理系统的设计与实现 总被引:5,自引:1,他引:5
为了充分利用保险企业的统计数据,指导公司的业务发展和决策支持,该文提出了一种基于数据仓库、在线分析处理及数据挖掘的保险企业管理系统解决方案。并从实际需求出发,分析了数据仓库的特征和体系结构模型,归纳并设计了保险企业数据仓库的基本结构框架,创建了一个面向保险业务分析管理的数据仓库系统,并对其具体的实现方法进行了阐述。该系统支持联机分析处理,并将数据挖掘应用于数据仓库的知识发现中,真正意义上运用了数据仓库理论和方法。 相似文献
19.
校园财务数据仓库系统的建立和OLAP应用 总被引:1,自引:1,他引:1
如何更加有效地利用事务处理系统产生的大量数据、使其发挥更大的价值,这是数据处理工怍的一个重要课题,笔者以所在学校为例讲述了校园财务数据仓库系统的建立和OLAI,应用。从数据粒度的选择、纯操作型数据的去除、模式的建立三个方面讲述了数据仓库的建模方法同时介绍了如何对多维组织后的数据进行切片、切块、聚合、钻取、旋转等操作。所介绍的方法对于在事务处理系统的基础上建立数据仓库系统、从以往的历史数据中挖掘隐藏的有价值信息,充分利用信息资源,辅助财务决策具有重要的意义。 相似文献
20.
基于数据仓库技术的银行决策支持系统设计和实现 总被引:6,自引:0,他引:6
该文提出了一种基于数据仓库、在线分析处理及数据挖掘的银行决策支持系统(BANK-DSS)解决方案,较好地解决了传统四库结构的决策支持系统中的协作问题。在此思想的基础上,通过分析研究,讨论了数据仓库的基本技术,归纳并提出了银行数据仓库的基本体系结构,以客户关系管理、风险管理、盈利管理和负债管理为应用主题,确立了相应的数据表及技术指标。设计了一种集成化的决策支持系统基本框架,以数据仓库为基础,支持联机分析处理,并将数据挖掘应用于数据库中的知识发现。 相似文献