用于智能电表数据分析的大数据平台

智能电网所产生的海量计量数据对数据存储和数据处理的系统架构提出了苛刻的性能要求,为此,文中提出了一种以内核、代理和客户端为主的模块化的大数据平台架构。所提议的大数据平台是基于Hadoop平台扩展,针对TB级别的静态智能电表数据集的存储和查询。实验结果表明,提议的大数据平台能够为电力行业提供一个具有竞争力且易于操作的大型能源数据管理和可视化知识平台,具有支持数据密集型决策的潜力。     

大数据分析技术的研究

在基于云的环境中,分布式数据中心承载大型数据存储库,同时提供用于分析的处理资源,有力地激发了有效并行/分布式算法的需求.这给大数据分析的潜在社会经济效益和应用特性的多样性带来了巨大的挑战.     

大数据分析及处理综述

如今,数据越来越成为全球科技竞争的制高点,拥有了海量数据就拥有了重要的战略资源.大数据技术在许多领域都发挥了重要作用,大数据技术一般是以大数据分析及处理为核心,掌握大数据分析及处理技术,能获取丰富的数据资源,也能够最大限度的开发数据价值.本文重点介绍大数据分析与处理技术.     

基于大数据的消防业务数据分析研究

为了对消防业务数据进行关联分析和深层次的数据挖掘,文章借助于大数据技术搭建一个消防业务数据挖掘分析服务平台,阐述消防业务的分析内容,主要包括灭火救援类业务和防火监督类业务。同时说明在业务分析中所使用的技术:业务专题分析支撑引擎和数据挖掘分析模式及模型研究。应用本平台可以为消防站、消防装备、消防人员等城市消防力量提供数据支撑依据,帮助决策层科学高效地指导消防工作,提高消防工作实战化水平。     

大数据时代的数据分析与挖掘

不断形成与发展的新型服务推动着人类经济社会项目的数据形式与规模向着更快、更准的方向发展,这无疑也预示着现代大数据时代正朝着我们推进。众所周知,数据并不单单是一项解决问题的手段,数据的种类逐渐从原有的结构模式向现今的结构化、半结构化以及非结构化的数据模式转换,这也预示着数据已不再只是一项简单的工具,而已逐渐作为一项较为基本的资源。那么应当如何正确、合理地应用现代数据呢？应当如何分析、研究数据资源？这已经逐渐成为当代人较多关注的问题。     

基于大数据分析的融合通信智能分析平台设计

由于通信网络安全直接关系到数据传输与共享的安全,为及时发现通信网络中存在的风险,提高通信网络安全,文章设计一种基于大数据分析的融合通信智能分析平台。通过采用MVC设计模式的思想搭建总体框架,包括模型层、控制器层和视图层。在硬件部分,通过通信流量数据采集卡采集大数据,并存储到存储硬盘当中,通过微控制器处理、挖掘与分析。在软件部分,设计三大功能模块,即大数据采集模块、大数据分析模块、智能预警模块。实验结果证明,与基于ABC-SVM的分析平台、基于循环神经网络的分析平台、基于支持向量机的分析平台相比,所设计平台的SROC面积数值更大。说明所设计平台的分析表现更好,更有利于保证通信网络的安全。     

大数据时代的数据分析

近年来互联网的高速发展引领人类进入了一个信息量爆炸性增长的时代。每个人的生活中都充满了结构化和非结构化的数据。随着人类生活全面向互联网转移,大数据时代将会不可避免的到来!作为全球互联网的前沿概念,大数据主要包括两方面特征:一方面整个社会的信息量急剧增长,另一方面个人可获取的信息也呈指数增长。从科技发展的角度来看,"大数据"是"数据化"趋势下的必然产物!并且随着这一趋势的不断深入,在不远的将来我们将身处于一个"一切都被记录,一切都被数字化"的时代。在这种背景下,对大数据的有效存储以及良好地分析利用变的越来越急迫。而数据分析能力的高低决定了大数据中价值发现过程的好坏与成败。本文以大数据时代的数据分析为主题,简明的阐述了国内大数据分析的发展现状、大数据的分析模式以及主要的分析技术、大数据时代数据分析的几个核心概念等相关问题。     

基于大数据分析的智能交通系统

大数据发展至今,已为众人所知,被众多行业和企业所用。尤其在天文、气象、医疗健康等领域已取得较好的应用价值。我国是汽车大国,快速发展的汽车行业也随之带来了城市交通拥堵和污染严重等诸多问题。如何将汽车与大数据有效的融合,通过大数据为政府决策提供数据支撑,为智能交通做贡献。     

大数据分析的智慧景点智能推荐模型

为了保证游客对推荐景点的满意度,以西安寺院为例,提出了大数据分析下的智慧景点智能推荐模型。采用Petri网景点游客分流模型获取超载景点以及可分流的目标景点集合,得出符合规则的目标分流游客信息集合后,通过协同过滤算法和情景上下文信息的结合,挖掘该信息集合内游客基本属性相似度、外部环境相似度以及综合相似度,依据评分值形成景点推荐集,完成智慧景点智能推荐。测试结果表明：该模型可有效完成游客负载分流,折扣累积利润和排序偏差准确率值均在0.9以上,实现游客数量最大化接纳,提升景点管理水平。     

基于数据分析的大数据质量管理平台应用研究

根据某用户现有数据中心支持数据源种类有限、不能在线实时数据质量管理、支持数据质量管理规则不丰富、操作可视化程度不高等问题,重点对涉及的大数据抽取、质量检测和统计分析相关的数据采集、数据质量检验等关键技术展开研究,开发出大数据质量管理平台工具,可为各类用户的数据中心进行数据质量管理。     

对大数据分析相关问题的思考

大数据分析作为当下的热点概念,得到越来越多的重视。但大数据不是万能的,它有自身的局限性,过分依赖大数据会产生很多问题。针对这一观点,文章分析列举大数据自身存在的局限性,概括在进行大数据分析时需要注意的问题,提出在做大数据分析时,应当把大数据做小的处理方式。     

基于大数据技术的企业综合数据分析平台

企业中利用大数据技术建立综合性的数据分析平台,不仅有利于企业的发展,而且也能够提高企业的公共服务质量。但是,如今大部分企业都没有意识到建立综合数据分析平台的重要性,对大数据技术的应用也不够深入,从而降低了企业中数据分析的效果。对此,主要对基于大数据技术的企业综合数据分析平台的设计进行分析,利用大数据具有的储存功能、计算功能、分析功能以及挖掘功能等,为企业建立一套全面、完善的数据分析平台,从而促进企业更好地发展。     

新型基于大数据分析与挖掘的战略决策框架

随着信息化时代的发展,如何将大数据分析与挖掘应用到战略决策中,更好地解决全局性、 可持续发展性的重大军事决策问题,是当前军队及军工研究所面临的机会与挑战.战略决策对于军队及军工研究所至关重要,一个正确的决策能够提高军队及军工研究所的发展潜力和竞争力.然而,传统的战略决策模型,如波士顿矩阵和麦肯锡矩阵等,存在一定的局限性...     

大数据时代下数据分析理念的辨析

主要研究大数据时代下数据分析理念,对大数据与大数据时代的深刻涵义进行了深度理解,并对大数据时代下数据分析理念进行了讨论,大数据的处理需要应用统计学理论,重视数据分析过程,且无需过分追求单一样本的准确性,随着数据量的逐渐增加,大数据的知识含量和价值也将随之增加.     

浅谈运营商大数据分析及应用系统设计

通信运营商拥有庞大的用户群,用户的通信消费行为产生了大量的用户数据,出于信息安全的考虑,目前运用商数据的应用仅停留在内部营销分析方面。随着数据的积累和大数据分析技术的发展,对于这些海量的数据如何挖掘,让其发挥更大的作用值得研究。文章系统地分析了运营商大数据的价值,对大数据分析及应用系统的的建设和运营提出了建议。     

大数据趋势下的搜索引擎用户信息安全研究

在经济的推动之下,科学信息技术得到突飞猛进的发展,大数据、云计算应运而生。文章阐述了大数据趋势下,搜索引擎用户信息安全的现状,分析了目前存在的问题,最后提出了有效的路径。     

浅谈大数据时代的数据分析与挖掘

信息技术的发展给人们的生活带来了巨大的便利,但是互联网、物联网现代物流等业务的发展带来了海量的信息,这使人们的数据收集、储存和分析应用都带来了困难.大数据概念在2011年被提出,通过对大数据的分析和挖掘可以对海量的数据进行利用,是目前研究的重要课题.本文对大数据的分析和挖掘方法进行了分析,并探讨了大数据分析挖掘体系建设的原则.     

基于海量数据分析的电力工程动态智能监控技术研究

针对电网公司对电力工程监控要求日益提高的现状,文中开展了大数据分析技术在电力工程智能监控中的应用研究。所构建的监控指标体系涵盖了进度、成本及质量共三个方面,并提出了基于标度法（SM）与先验（Apriori）算法的电力工程动态智能监控算法。利用标度法筛选出对电力工程存在重要影响的监控指标,同时采用先验算法实现不同指标间关联规则的挖掘,根据强关联规则构造有向网络模型。通过将现有电力工程数据输入至该模型中,便可对电力工程的动态进行智能监控。仿真算例结果表明,文中构建的监控指标体系完整、全面,且所设计算法能够实现对电力工程项目偏差风险的识别。     

企业级安全大数据分析平台

介绍安全大数据分析平台的系统架构,对数据标签化流程进行分析,介绍基础特征选择算法、高阶特征生成算法和分类算法,并搭建实验环境对Spark和Mapreduce方法进行对比分析.     

基于大数据分析的电子地图数据驱动系统设计

为了提高电子地图数据的响应和调度效率,设计电子地图数据驱动系统。针对当前的半主动标签驱动模型进行电子地图数据驱动设计对大数据信息处理的实时性不好的问题,提出一种基于大数据分析与信息融合的电子地图数据驱动系统模型设计方案。在驱动系统的串口操作界面通过多线程技术读取和写入电子地图数据,选用CC2530作为驱动系统的主控芯片,使用开源版本的Qt建立驱动系统的开发编译环境,在增强型的X86总线中进行大数据融合处理,实现电子地图数据驱动系统优化设计。实验结果表明,采用该系统进行电子地图数据驱动与信息调度的实时性较高,数据的召回率高于传统模型。