首页 | 本学科首页   官方微博 | 高级检索  
相似文献
 共查询到20条相似文献,搜索用时 109 毫秒
1.
基于划分的数据仓库查询归并技术及其应用   总被引:1,自引:0,他引:1  
在数据仓库中存在着大量的数据,对这些数据的查询与处理要消耗大量的资源,解决这一问题的有效办法是先将数据划分为便于处理的数据块,再对数据块进行处理,最后将处理结果进行归并。介绍了常用的基于划分的数据仓库查询归并技术及其在VB中的应用,并结合自己的编程经验给出了例证。  相似文献   

2.
银行信用卡分类挖掘数据的预处理   总被引:9,自引:0,他引:9  
翟凌慧  马少平  唐焕玲 《计算机工程》2003,29(11):195-196,F003
描述了信用卡数据分类挖掘中的数据预处理过程,先从纷杂的应用数据中选择与分析主题有关的数据表,经过一系列数据库操作,从这些数据表中获得样本的输入信息,然后从交易历史信息中抽象出对样本分类的相关参数,将分类标准量化后得到对样本的分类。最后经过数据规格化、异常处理、缺失处理等数据清理方法对样本数据进行加工,得到分类挖掘所需的样本数据。  相似文献   

3.
在不脱离MicrosoftWord2003环境下,利用宏的技术,处理表格数据。通过宏的技术,制作实现数据统计操作的快捷键,通过对快捷键的操作实现对表格数据的处理;利用宏的技术制作出对应操作的工具栏按钮,通过对这些按钮的点击操作处理多表格中数据。这些操作方便快捷,实现了简化操作和提高工效的目的。  相似文献   

4.
随着数字经济的快速发展,如何实现非可信环境下的多方数据融合,为跨组织场景的数据共享、数据分析以及数据服务寻找新途径,成为了社会数字化产业升级中面临的新问题。数据空间为解决这些问题带来了新思路。文中回顾了数据的组织和管理发展历程,指出在大数据背景下数据空间的系统研究具有急迫性和重要性,分析了数据空间的内涵并进行了形式化描述,提出了基于数据空间的大数据平台架构,总结描述了3类经典的应用场景。围绕数据空间的构建工作,从数据建模、动态演变、数据查询处理、安全与隐私拓展方面分析了当前的关联研究问题和主要技术方法,简述了数据空间在不同领域的实现和应用情况。最后从多模态数据融合、高效的查询处理、数据的安全共享及基于数据空间的大数据平台构建分析方面展望了研究前景和挑战。  相似文献   

5.
基于XML技术的网络教学数据处理系统实现   总被引:3,自引:0,他引:3  
在网络教学过程中产生的大量数据(如作业、答疑、成绩等)是宝贵的教学资源,这些数据的种类、来源多样,包括非结构化、结构化数据,并且具有半结构化特点。基于XML技术实现了一个教学数据处理系统,能够对网络教学数据进行统一保存、处理并实现异构教学平台之间的数据交流。  相似文献   

6.
Excel中,我们经常要用到有关数据处理的函数和公式,用以处理纷繁复杂的数据信息。数据处理的方法包括数据筛选、数据统计和数据计算等等。这些数据处理的方法很实用,为我们处理庞大的数据信息带来了很大的便利。对这些方法进行归类和解析,更有助于初学者更快更迅速地掌握和理解这些数据处理的方法。  相似文献   

7.
在网页上很多数据是以表格的形式存在的.要得到这样的数据.往往都是通过保存网页的方式进行。如果想对这些数据进行再加工,就要颇费一番周折.其实利用EXCEL本身提供的导入外部数据功能.不仅能将网页表格中的数据直接导入到EXCEL中.还可以对这些数据进行加工处理。其实现方法也很简单.且看本文介绍。  相似文献   

8.
工程地质勘察是水利、电力、交通、资源等许多行业的必备手段之一,其面临的信息种类繁多、数量巨大,获取这些数据和信息的投入很大,因而这些数据和信息具有不可估量的价值。本从管理数据的常规技术数据库角度出发,探讨了工程地质勘察中应用数据库技术的一般性原则和处理方法,并就数据库的应用进行了探索  相似文献   

9.
在属性级别上处理噪声数据的数据清洗算法   总被引:3,自引:0,他引:3  
噪声数据的处理是数据清洗的一个重要环节.文章提出一个基于聚类分析的在属性级别上处理噪声数据的算法.该算法通过聚类分析确认噪声数据产生噪声的具体属性,同时统计噪声在属性上的分布规律,这些统计数据可以在下一步的工作中进一步提高数据质量.  相似文献   

10.
在数据仓库中存在着大量的数据。联机分析处理包含着对大量数据的复杂的查询过程。在对这些数据的存储与查询中都遇到了许多困难。解决这一问题的有效办法就是先将数据划分成便于处理的数据块,再分别对每个数据块进行处理,最后将个数据块的处理结果归并在一起。对几种常用的归并算法进行了比较,并讨论了归并中的缓冲区分配问题。  相似文献   

11.
电子病历数据预处理技术   总被引:3,自引:0,他引:3  
多年积累的电子病历是一项重要的不可再生资源,对其数据的有效处理、利用是一项非常必要和有意义的工作。本文研究了电子病历数据前期处理的相关技术,涉及从电子文档资料到基础数据库的转换,对存入数据库的数据实施数据清理和数据变换等。通过数据预处理可以消除数据中的噪声、不完整和不一致性,实现数据的规范化和有效压缩,从而形成高质量的数据,可使数据的再处理(统计、数学建模、数据挖掘等)更加有效。  相似文献   

12.
数据仓库环境下以用户为中心的数据清洗过程模型   总被引:7,自引:1,他引:7  
数据清洗是数据仓库和数据挖掘中非常重要的一个环节。本文首先分析总结了数据清洗的有关概念,给出了数据清洗中需要解决的质量问题,并总结了解决这些问题的技术和方法。在此基础上提出了以人为中心的数据清洗过程模型。该模型集成了工作流技术、数据集成、数据转换和数据挖掘技术。给出了每个工具箱应该提供的基本功能。  相似文献   

13.
随着信息系统在社会各企业中的广泛运用,特别是在银行业,信息系统数年中收集了海量数据,且数据还正以指数级增长,在这信息化的大潮中,银行高层都希望用数据分析来了解银行的经营状况和外部环境,做出科学的决策,在现代激烈的银行业竞争中占有一席之地。本文主要对数据仓库环境的组成、维度建模做一个简要的介绍,结合银行的特定业务,对相应的业务需求介绍银行信用卡数据仓库的基本构架,同时简要论述银行信用卡数据仓库对银行信用卡业务的巨大作用。通过一个基于银行数据仓库项目的完整流程,具体地描述了数据采集,数据转换和数据加载的具体实现方法。对一个具体的业务需求的分析,设计相应的维度模型,最终完成一个客户等级MIS,并输出相应的日报表。最后简要介绍数据仓库的深层应用。  相似文献   

14.
数据是地理信息系统(GIS)应用的核心。现实世界的数据具有普遍的多样性,关于GIS接受不同数据的研究已成为当前GIS研究中的一个难点和热点。从常见空间数据类型的格式、GIS接受外部空间数据的方式以及GIS接受外部空间数据中的数据精度、比例尺、坐标变换等几个方面,对外部空间数据处理系统的数据向GIS转换的问题进行了探讨,同时以通用GIS工具软件ARC/INFO为例分析了其接受外部矢量空间数据的方式。  相似文献   

15.
魏定国 《现代计算机》2002,(12):6-10,15
当今数据清理方案需要反复进行数据质量分析以查找错误,为修复它们而进行的转换需要运行很长的时间。用户需要忍受长时间的等待,而且经常需要撰写复杂的转换脚本。我们所探讨的交互式数据清理系统,它能紧密地将转换和偏差检测集成在一起,只要发现偏差,用户就可以交互式地使用简单的图表操作、实例描述逐渐建立一个转换,无需书写复杂的程序或忍受很长的延时。  相似文献   

16.
数据仓库中ETL技术的研究   总被引:43,自引:0,他引:43  
作为数据仓库的关键部件,支持数据抽取、清洗、转换和装载的工具集对任何数据仓库工程都是一个必不可少的成功因素。该文简单介绍了ETL技术,包括ETL的相关概念、ETL在数据仓库中的功能和重要地位以及现有的研究成果,然后重点介绍了ETL的具体设计和实现方法。  相似文献   

17.
数据仓库中的数据提取   总被引:18,自引:2,他引:16  
连立贵  金凤  蔡家楣 《计算机工程》2001,27(9):61-62,99
数据仓库的思想和工具在企业中得到了越来越广泛的体现和应用,在当前典型的数据仓库应用中,数据仓库的填充或者说数据的提取,转换和加载是设计人员遇到的最大挑战之一,预计在数据仓库的设计过程中,80%的努力都将用于此过程。该文从工程角度介绍了数据提取、转换和加载的过程和实现方式,并介绍了4种可灵活应用的数据提取方法。  相似文献   

18.
吴昊 《电脑学习》2001,(2):36-37
为有效地解决实际问题,可能要使不同语言进行混合编程,这样就涉及到数据的传递和不同类型的数据文件之间的转换,这里讨论几种常用数据交换问题。  相似文献   

19.
基于CWM的元数据管理系统中数据交换格式的研究   总被引:1,自引:0,他引:1  
通用数据仓库元模型(CWM)是为数据仓库及商业智能环境间方便地交换元数据而制定的一个标准,可望成为未来数据仓库元数据管理的规范。它采用XMI作为元数据交换的基本格式。该文给出了一个基于CWM的元数据管理原型系统MMS的逻辑框架,并重点介绍了该系统的数据转换功能,其中给出了转换的形式化描述和几种元数据的XMI编码。  相似文献   

20.
基于XML的元数据体系的数据交换   总被引:5,自引:0,他引:5  
该文针对Internet和电子商务中数据交换的需求,提出了基于元数据交换体系的数据交换,该数据交换方法以描述元数据和模式转换元数据为基础支持,并以BtoB模型为应用对象,完成了将XML文档无二义地转换为关系模型的通用方法。  相似文献   

设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号