共查询到20条相似文献,搜索用时 60 毫秒
1.
给出了数据迁移的概念、一般步骤,同时设计出某个银行数据仓库系统的基本框架,并以该银行数据仓库系统为例,说明应该如何利用MS SQL Server2000来实现数据迁移。 相似文献
2.
ETL即数据抽取、转换、装载的过程,它是构建数据仓库的重要环节,而数据仓库是面向主题的、集成的、稳定的且随时间不断变化的数据集合。数据清洗是一个减少错误和不一致性、解决对象识别的过程,目前有很多数据清洗研究和ETL研究,但是如何在ETL过程中进行有效的数据清洗,此方面研究不多。本文将以此为问题出发点,探讨ETL中的数据清洗技术在税务系统(贵州省省直属局和九个地市州的原始数据)中的应用。 相似文献
3.
提出了一种基于数据质量进行控制的ETL技术,在传统的ETL操作流程中增加脏数据处理模块及抽样数据质量评估模块,并将数据质量控制思想融入到ETL的操作流程设计中,控制ETL过程的数据质量。实验表明,带有质量控制的ETL算法设计优化了ETL工作流程,提高了进入数据挖掘中数据的质量。 相似文献
4.
数据迁移在证券分析系统中的应用研究 总被引:1,自引:0,他引:1
针对数据迁移在证券分析系统中的重要作用和对证券分析结论的重大影响,探讨了数据迁移的方法和流程;同时根据证券分析系统的实际需求,设计了证券分析系统数据仓库的基本框架,改进了数据迁移的方法.实际运行结果表明,大量证券数据得到了可靠和快速地迁移. 相似文献
5.
文笃石 《西安邮电学院学报》2008,13(5):130-133
ETL即数据抽取(Extract)、转换(Transform)、装载(Load)过程,通过讨论ETL在电信客户关怀项目中的实践应用,说明ETL在数据仓库的建设中占据了相当重要的位置。ETL技术的引用,大大缩短了生成汇总数据的时间,使应用查询更快,更高效,明显降低了应用系统的负担。 相似文献
6.
分析数据集成中常见的数据迁移方法及它们的优缺点.利用Hibernate的实体映射功能,说明了如何建立实体映射规则,提出了一种解决多键值依赖的面向对象数据迁移方法.实际应用表明,该方法数据迁移速度快,不仅能够完整地迁移所有数据,同时还能保证数据迁移过程中数据精度的损失在可控范围内. 相似文献
7.
孔芳 《苏州大学学报(工科版)》2004,24(2):51-54
数据迁移就是将数据从一种数据环境移入另一种数据环境中。它不仅仅是简单的数据搬家,还涉及到数据格式的转换。本文介绍了在Microsoft公司UDA技术基础上,利用SQL语句完成常用数据库数据间迁移的一般性工具的设计和实现流程。这一完整的数据流程如果定期发生,就可以频繁到实时数据转换或不频繁地每月为数据仓库进行更新,因此对于数据仓库的建立,以及后续的数据挖掘都有相当的实际价值,同时对于应用程序更新也具有一定意义。 相似文献
8.
在异构环境下,目前数据起源研究主要基于OPM模型来表示数据在ETL中的来源过程,存在着起源概念不统一、词汇使用混乱以及无法提供标准化访问等问题。基于W3C的PROV模型,提出了ETL起源信息的统一表达机制。该机制首先对ETL过程的起源概念及其关系进行了统一描述。然后,针对ETL过程特殊的语义表达需求,建立了多粒度的ETL起源词汇表。最终,建立在RDF之上的标准化查询机制提高了起源信息的可访问性。 相似文献
9.
异构数据库之间数据迁移的实现方法 总被引:5,自引:0,他引:5
结合基于 Sybase+Power Builder开发环境的实际经验 ,总结在 PB环境下利用ODBC技术实现异构数据库之间的数据迁移的四种方法 ,并分析每种方法的优缺点和具体实现 相似文献
10.
张玺 《北京机械工业学院学报》2012,(5):77-80
针对大量气象数据从磁盘到磁带数据迁移问题,分析数据迁移工作特点及功能需求,采用并行文件系统与存储管理软件相结合的方法,建立了数据迁移模型,开发了数据迁移接口脚本,实现了数据的自动迁移功能,为用户提供海量存储空间,方便用户直接检索。 相似文献
11.
数据集市技术浅析 总被引:1,自引:0,他引:1
文笃石 《西安邮电学院学报》2009,14(5):90-92
数据集市是当前数据仓库建设的重要环节,本文通过对目前某电信的数据现状进行分析,给出了两种数据集市的建设方案,并分别对两种方案特点进行了描述。解决了电信所遇到的数据问题。 相似文献
12.
谷赫 《长春邮电学院学报》2008,(6):652-656
针对当前电信业务中各业务系统的数据库之间没有很好地连接而形成信息孤岛的问题,利用数据仓库这一新型的数据组织及存储方法,对电信业务进行有效的数据分析和企业决策。针对业务数据,构建数据仓库平台,对功能框架和软件进行部署。通过接口设计对数据进行必要的规范和组织,依据该规范和约定进行环境配置,将预处理后的数据经DI Designer加载到数据库中,通过ETL(Extraction Transformation Loading)完成数据获取、存储及访问。该平台的建立能对各生产系统的数据加以统一,为前台的展示开发提供强有力的后台支持,便于决策层对企业发展状况更为准确的把握。 相似文献
13.
对RFID数据清洗方法进行综述。介绍RFID数据清洗技术的国内外研究现状,通过分析RFID数据流的不可靠性,给出典型数据清洗方法,说明各种方法基本原理。重点分析自适应SMURF算法,给出了一些改进,并对后续工作给予展望。 相似文献
14.
客户机/服务器的应用逻辑设计是否合理,直接影响到客户机/服务器方应用系统的处理性能,以Oracle7服务器为平台提出一些方法,以确定如何划分应用逻辑,使客户机/服务器应用系统有较高的处理效率。 相似文献
15.
郑慧娟 《西安邮电学院学报》2009,14(5):51-54
快速傅立叶变换的引入使得多元LDPC(低密度奇偶校验)码的译码复杂度大大降低。然而,其内在原理却并没有得到很好的解释。基于两个独立随机变量和的概率质量函数计算,本文对快速傅立叶变换在多元LDPC码译码中的应用给出了一种简单且清晰的解释。 相似文献
16.
运用大数据技术对陕南移民搬迁信息化系统中的数据进行管理、分析,简述大数据的基本特点与关键技术、数据采集技术、分布式存储技术、并行化处理技术和海量数据挖掘技术。根据信息化系统的体系框架,对大数据技术在陕南移民信息化系统中的应用进行探讨,分析大数据技术的应用价值,阐述政府在大数据技术上投入的重要性。 相似文献
17.
入侵检测系统是一种检测网络入侵行为的工具,然而现在的入侵检测系统内部知识库中的入侵模式往往不能很好地反应入侵行为的特征,所以有时候经常出现漏报或误报的情况。另外,系统提取的用户行为特征有时候也不能正确地反映用户的实际行为特征。针对这一情况,文章详细介绍了数据挖掘技术在入侵检测系统中的应用,介绍了一种基于数据挖掘技术的入侵检测模型。 相似文献
18.
在地质灾害评价实际工作中,为了准确提取数据、方便绘图,结合AutoCAD(Auto Computer Aided Design)和MAPGIS(Map Geographic Information System)的基本特点,详细分析了两者图形数据特点和图形数据转换过程中需要注意的问题。重点阐述AutoCAD的DXF(Drawinge Xchange Format)和DWG(Drawing)两种图形数据格式与MAPGIS的MPJ(Mapgis Project)图形数据格式之间转换的实现过程与方法,从而使现有的地理信息资源得到充分利用,实现图形数据共享。 相似文献
19.
各种极端外部灾难的发生使得电力系统不再是一个孤立的子系统,迫切需要将三维地理信息、气象信息、雷电信息等外部信息引入电网的运行生产管理.深入分析电网对外部信息的感知以及与运行信息的相互融合技术;采用基于面向服务的体系构架(SOA),建立融合电网调度的实时运行信息以及相关外部信息的监视平台,该平台实现了地理图和电网接线图上的2D/3D混合显示,多维信息的智能表达.该平台已在某省级电力调度中心投入使用,扩展了电力调度信息的接入和融合,为电力调度监视提供强大的技术支持. 相似文献
20.
在WCDMA中,TFCI(TransportFormatCombinationIndicator,传输格式组合标识)非常重要。WCDMA中TFCI的编码有两种方案,一种是在正常模式下,另一种是在分裂模式下。已有的穷举法译码方法具有效率低的缺陷,该文提出利用反哈德马德变换进行高效TFCI译码的方案。仿真表明了该译码方案的有效性。 相似文献