共查询到20条相似文献,搜索用时 828 毫秒
1.
阐述基于Hadoop的电商数据分析系统的设计,包括系统技术架构设计、数据采集模块、数据存储模块、数据仓库模块的设计,探讨基于Hadoop的电商数据分析系统实现,创建系统总体框架和基础平台,数据仓库的实现。 相似文献
2.
《电子技术与软件工程》2017,(24)
数据分析与数据挖掘可以将有价值信息从现实信息中提炼出来,基于数据的高速公路智慧型稽核系统的应用是未来发展的必然趋势。本文首先对数据挖掘在稽核中的应用进行简要介绍,然后对基于数据的高速公路智慧型稽核系统设计流程与设计方法进行分析,希望为我国高速公路稽核系统设计工作做出贡献。 相似文献
3.
为了从大量银联交易流水数据中提取出有助于管理者进行决策的信息并实现数据的共享,将数据仓库与OLAP两项技术应用于银联数据分析系统中,实现对银联交易流水数据的多维分析、多模型主题分析。 相似文献
4.
本文通过对信息系统运维与数据分析技术的研究,提出基于机器学习算法的运维数据分析系统的建设意义与思路,实现了数据管理和分析过程的简化,提升数据应用效率,为信息运维中故障诊断与决策分析提供技术支撑。 相似文献
5.
数据仓库技术在超市销售管理中的应用 总被引:1,自引:0,他引:1
首先介绍了数据仓库的概念,数据仓库就是一个能更好地支持企业或组织决策分析处理的、面向主题的、集成的、不可更新的、随时间不断变化的数据;其次介绍了数据仓库的两大分析工具联机分析处理和数据挖掘,联机分析处理是以海量数据为基础的复杂分析技术,数据挖掘是从海量数据中,提取隐含在其中的、人们事先不知道的但又可能有用的信息和知识的过程;最后介绍数据仓库在银行、金融、电信及零售等行业中的应用,并以超市销售管理为例,利用数据仓库技术建立数据模型和体系结构。 相似文献
6.
7.
基于数据仓库的数据分析系统研究 总被引:8,自引:1,他引:7
在介绍了数据仓库、联机分析处理 (OLAP)、数据挖掘技术理论的基础上 ,提出了一个基本的基于数据仓库的数据分析系统模型 ,并简要阐明了它的实现方式。 相似文献
8.
信息业务猛增,要求信息网络应用提高应用效率的对策途径。信息数据库技术经过第一代“层次模型”、第二代“关系模型”和第三代“面向对象模型”的创建与发展,为解决查询、存储、调用处理数据库的数据,将数据库中数据粗品改为半成品或成品(数据件)建立数据仓库提供了技术支持。数据仓库创意的实质是可汇集日常业务中的数据,随时予以变换、精炼成为数据成品,存入数据库房。这种数据仓库任务应遵循一定的设计原则完成。在详述数据仓库系统的结构与子系统的内部结构后,介绍其系统设计要点,例举Platinum数据仓库产品结构及特点,并指出数据仓库系统的研究情况与发展。(ed) 相似文献
9.
姚子扬 《电子技术与软件工程》2022,(19):205-209
本文围绕着基于大数据的企业用户数据分析平台的设计展开探讨,对用户行为分析做出概述,对基于数据分析的大数据技术进行分析,探索借助大数据技术构建用户数据分析平台的重要价值,明确系统设计需求,并提出一种基于大数据的企业用户数据分析平台的设计方案,为相关的系统架构设计提供一定的思路,促进大数据技术在企业生产营销中的应用,推动企业信息化发展。 相似文献
10.
本文将数据仓库技术应用于有线电视网络业务中,阐述了系统的总体架构,重点介绍了在有线电视网络业务中,数据获取、数据仓库、分析处理、数据展现四个层次中的应用方法与技术实现,包括数据加载、抽取和清洗、如何进行主题设计和建立相关的维度模型、面向决策的智能分析设计思路,数据展现层的技术手段等。由此构建的基于数据仓库的数据管理平台为实现业务整合、数据分析、决策支持提供了信息化的手段。 相似文献
11.
12.
13.
为解决传统数据仓库扩展能力弱,不支持非结构化数据的问题,江苏有线结合实际应用情况,基于SQL-on-Hadoop技术实现了分布式的广电数据仓库TRAF。TRAF融合了传统数据仓库与Hadoop技术,可以同时存储结构化和非结构化数据,具备良好的扩展能力。TRAF在HBase框架之上构建支持多重查询嵌套和多级索引ANSI SQL标准的查询接口,实现海量用户行为的实时分析;采用通用x86服务器替代原有小型机存储,大幅降低了系统构建成本。测试结果表明,数据量在10亿条时,TRAF的处理速度比传统关系型数据仓库提升了5倍,同时构建成本降低了50%,有效提升了广电数据分析系统的应用水平。 相似文献
14.
数据仓库技术是为了有效的把操作形数据集成到统一的环境中以提供决策型数据访问的各种技术和模块的总称。在中国电信公话综合分析管理中成功应用了该技术。本在概要介绍数据仓库技术及中国电信公话综合分析管理系统的基础上,重点了分析了数据仓库技术在公话综合分析管理系统的应用实现,包括数据仓库的实现、OLAP的实现和数据挖掘的实现。 相似文献
15.
随着大数据技术的飞速发展,大数据技术为各行各业的数据存储和分析提供了有力的技术支撑,在Hadoop大数据集群平台构建Hive数据仓库,使用Hive SQL语句对数据进行查询、汇总和数据分析;Hive本身的数据存储依赖于HDFS分布式集群环境,Hive通过将Hive SQL转换成MapReduce程序,通过大数据集群完成并行计算。文章通过构建Hive数据仓库,通过爬虫获取到腾讯证券中大陆在美上市股票数据,数据处理后,存储到Hive数据仓库。并使用Hive SQL完成基本的数据分析、查询和数据汇总,完成DDL、DML、DQL的基本应用,并在Hive数据仓库完成表的简单查询、复杂查询、表的连接等应用。 相似文献
16.
主要就OLAP以及数据仓库技术概念做出一定的探讨,并且介绍了其功能点和应用特点,结合工程案例建立了一套简单的OLAP分析模型,管理人员利用该模型可以进行实时、直观和快速查询,能够从监测对象、测点类型以及时间三个维度进行地下工程的信息和数据分析,从而有利于管理人员对海量监测数据的管理以及有效信息的获取。 相似文献
17.
总结了中国建设银行信贷管理信息系统的建设经验 ,对数据仓库在银行信贷管理信息系统中的应用从多方面进行了论述。将建设银行信贷信息业务数据收集到业务数据库并进行数据抽取到数据仓库中 ,再应用BO等数据分析工具 ,进行灵活的分析统计和钻取 ,成功地解决了信贷管理中的分析统计的实际问题 相似文献
18.
19.
伴随社会经济和科技的飞速发展,企业的信息化程度也在不断加深,各行业都在进行大量新技术的引进和应用。其中移动通信行业中数据仓库技术的应用,能够提高企业业务经营数据分析的能力。数据仓库技术对数据的有效分析,建立于企业内部和外部市场等方面收集的数据基础上,能够更客观、有效的反应企业的运行情况,并作出合理的科学分析决策,从而提升企业市场竞争力。本文主要对数据仓库的建立流程和数据仓库技术在移动通信中的应用进行分析。 相似文献
20.
为了提高电子政务系统的融合水平,提高信息资源共享的水平和能力。必须完成系统融合、业务融合、数据融合三个融合部分,初步建立大数据分析及决策系统;完善系统融合、业务融合、数据融合三个融合部分,完善建立大数据分析及决策系统,整体完善大数据的整体体系和分析计算、展示能力。本文详细介绍了大数据挖掘分布式存储应用融合业务系统设计与实现架构。 相似文献