基于数据仓库的电信网络分析系统研究

电信市场的竞争日益激烈,数据仓库技术的出现为电信业务更快更准确的决策支持提供了保障。通过对电信网络分析业务的需求进行调研,结合数据仓库技术,给出了基于数据仓库的电信网络分析系统的总体架构,研究了系统的数据仓库维度建模及ETL的实现技术,基于以上技术设计开发的电信网络分析系统在实际中得到良好的应用。     

五矿集团进出口数据仓库的构建研究

数据仓库是实现企业分析决策的有效技术。文章从数据仓库设计原则出发，首先使用Power Designer构建了业务模型；然后设计了一套通用性、可扩展性较强的ETL（Extract、Transform、Load）具，对数据进行全面的抽取、转换、清洗和装载处理；最后通过设计Business Objects的语义层对数据进行分析和展现，从而实现了对五矿进出口数据仓库构建。     

基于数据仓库技术的消防分析系统设计研究

本文以消防业务数据为基础,讨论了消防分析系统中数据仓库的设计方法、特点和优势,并对数据仓库建模中的各个关键步骤和要点进行了相关阐述.研究结果表明,利用数据仓库技术,在一定程度上对消防相关部门的分析决策起到了辅助作用.     

超市数据仓库与数据挖掘的研究

传统的数据库管理信息系统不能够很好地利用、分析数据库中积累的大量数据,数据仓库与数据挖掘技术很好地解决了这一问题.通过分析超市业务数据库,用星型架构的方式建模,构造出一个数据仓库的逻辑模型;然后从超市业务数据库中抽取数据,经过转换等处理,把有价值的数据加载到数据仓库中,完成数据仓库的构建,并论述客户分片的数据挖掘过程.     

基于云计算的网络测量方法研究

随着网络技术的飞速发展,网络流量数据呈指数级增长,目前常用的集中式网络测量方法已经很难满足要求.论文提出一种基于云计算的网络测量系统,设计了基于数据报文的往返时延计算和Netflow流聚合的MapReduce算法,用于解决海量测量数据处理,实验结果表明该算法具有较好的正确性和可扩展性.     

数据仓库在超市中的应用研究

数据仓库在超市中的应用研究以超市连锁店数据仓库的构建为背景,利用数据仓库建模、ETL、OLAP联机分析处理等技术,分析设计了基于数据仓库的决策支持系统,以发现潜在的、有用的关系和模式。这些知识可以有效指导企业经营管理,达到降低运营成本、增加利润和市场份额的目的。     

基于云计算的SLIQ并行算法研究

云计算为存储和分析海量数据提供了高效的解决方案,对数据挖掘算法的研究具有重要的理论意义和应用价值。SLIQ算法采用逐一遍历并计算伸缩性指标的方法来寻找最佳分裂点,这种方法过于消耗时间,当数据量增大时,算法的执行效率很低。本文针对云计算环境下的决策规则挖掘算法展开研究,介绍了Map Reduce编程模型,在此基础上,以实现云计算环境下SLIQ并行化挖掘为目的,给出了改进后的SLIQ算法在Map Reduce编程模型上的应用过程。     

基于数据仓库的科学仪器设备数据分析系统

如何节省在科学仪器设备管理工作中对数据分析投入的人力物力并提高管理效率是科技管理部门十分关注的问题。利用数据仓库技术可以对现有的科学仪器设备数据进行多维分析,以便有效利用分析数据辅助管理者决策。文章据此分析了科学仪器设备数据源,提出了分析主题,通过模型设计、ETL功能以及OLAP功能的设计,实现了一个基于数据仓库的科学仪器设备数据分析系统。系统的开发研究证明了数据仓库技术在科学仪器设备管理上应用的可行性,并为进一步建立基于数据仓库的科技数据决策支持系统打下了基础。     

基于SBO的数据仓库的设计与实现

本文是基于SBO的数据仓库的设计,针对SBO的业务需求设计了数据仓库的总体架构,并以销售主题为例介绍了SBO数据仓库数据模型的设计。最后在WindowsXP平台上,选择在SBO内部利用SQLServer2000构建数据仓库,并按照SBO的统一标准设置字段;中间服务器采用SQLServer2000自带的Analysis Services来实现。     

粮食行业数据仓库构建*

在充分考虑粮食企业业务运行系统的现有状况和深入分析用户决策需求的前提下,借鉴数据仓库技术的基本组成,研发了一个ETL（Extract,Transform and Load）程序,与Businessobjects,Sybase等产品共同构建了粮食行业数据仓库。     

基于云计算的数据安全存储策略研究

数据安全问题是困扰云计算发展的主要问题之一,针对目前云计算应用中用户数据安全存储需求提高,需要极大提高数据读写效率的问题,提出采用对称加密算法与非对称加密算法相结合的加密、解密方案,利用对称密钥适合对大规模数据加密,而非对称密钥本身安全性较高的特点,充分发挥了两者在云计算环境下的优点,实现了一种存储安全性好而且读写效率高的数据存储策略;力图在数据安全性达到非对称密钥加密体制的前提下,使算法效率接近对称密钥加密体制的水平。     

基于ETL的政务云气象数据仓库构建

针对气象网站等应用系统向地方政务云迁移过程中缺乏基础数据的现状,从功能性,开发成本,灵活性方面考虑选用ETL工具,基于Kettle软件对气象数据ETL流程进行建模,使用Quartz开发作业调度系统实现ETL流程的自动化运行,在政务云搭建SQL Server数据库集群,构建了政务云气象数据仓库.该数据仓库实现了异构环境气象数据在政务云的实时同步和存储,为气象应用系统在政务云的全面部署提供了数据支持,也为气象部门参与电子政务数据交换和共享打下基础.     

云计算环境下关联规则挖掘算法的研究

云计算为存储和分析海量数据提供了廉价高效的解决方案,云计算环境下的数据挖掘算法的研究具有重要的理论意义和应用价值。针对云计算环境下的关联规则挖掘算法展开研究,介绍了云计算的概念、Hadoop框架平台、MapReduce编程模型和传统的Apriori算法;在此基础上,以实现云计算环境下的并行化数据挖掘为目的,对Apriori算法进行了改进,给出了改进的算法在Hadoop中的MapReduce编程模型上的执行流程;通过一个简单的频繁项集挖掘实例展示了改进的算法的执行效率及实用性。     

云计算和云数据管理技术

随着各种新技术的发展,企业的关键信息以几何级速度增长,更多的数据需要保存更长的时间.伴随着云计算技术的发展,云计算已经成为一种全新的互联网应用模式.而在云计算对海量的数据高效管理,云端数据精确精准快速查询成为越来越重要的问题.一个新的面向云计算的数据管理研究领域正逐渐形成,在云计算技术的基础上,提出了云数据管理的概念.分析GFS,BigTable,Dynamo等当前互联网主流云数据管理系统的基本原理,并针对未来云数据管理架构进行分析,最后指出了云数据管理领域的主要研究方向.     

基于区块链的云计算数据共享系统研究

云计算用户通过云平台进行数据共享时面临数据不可控和敏感数据泄露的风险,传统通过数据加密上云的方式在灵活性和执行效率方面存在弊端.借助区块链的去中心化共识和不可篡改等特点,提出了基于区块链的模型和实现方案.采用私链与公链双层结构,通过元数据按规范查询和解析数据,查询结果可验证.数据在私链中存储,公链中存储私链块头,计算通...     

云计算数据安全研究

文章分析了云计算中最核心的数据安全问题,利用密码学中的最新的全同态加密技术,来保护云计算中的数据安全。利用全同态加密具有可操作加密数据的特性,提出云计算数据安全方案。既保障了数据的安全,也能保证应用的效率。     

军械装备保障数据仓库中的ETL过程优化研究

针对军械装备保障数据仓库中复杂的ETL过程,提出采用改进的粒子群算法进行ETL任务调度的优化策略;通过改进惯性向量,使其具备动态调整能力,形成更具寻优特性的动态w粒子群算法(DWPSO);在对数据仓库ETL调度过程进行数学化描述的基础上,将改进算法应用在以最小执行时间为目标函数任务调度中,并通过仿真实验证明了该算法的有效性.