基于HBase的输电线路综合数据存储方案设计

输电线路综合数据具有复杂性、体量巨大及多源异构等特点。针对当前关系数据库对于视频图像、图片等非结构化数据处理能力不足的问题,结合大数据的相关理论,提出基于Hadoop和HBase的输电线路综合数据的存储方案,将结构化数据和非结构化数据均转化为Bytes数组存入HBase数据库,并阐明具体的存储原理和工作方式,有效地解决了原有数据信息共享性差、非结构化数据难以存储等难题,弥补了关系数据库的不足,为大数据时代下智能电网的信息化建设提供思路。     

企业级非结构化数据管理平台研究及实践

非结构化数据是大型企业的宝贵数据资产,其基本特征是数据格式多样、数据存储分散、数据总量大、增长速度快,蕴含有提升企业管理水平的大量重要信息。非结构化数据的统一存储、集中管理与深化应用是当今大型企业信息化建设的重要方向之一。文章分析了非结构化数据管理平台建设的背景和关键需求,基于企业架构设计了平台架构、技术路线及部署模式,并介绍了平台在国家电网公司具体应用实践。实践证明研究成果可行、有效,能够极大促进企业非结构化数据资产的安全、高效利用,大幅提升非结构化数据的集约化管理水平,为企业解决非结构化数据的集中存储、有效利用等技术难题提供了重要的应用示范。     

企业级非结构化数据中心存储组织形式探究

非结构化数据蕴含着企业大量的核心知识和无形资产,是企业得以发展壮大的宝贵财富,特别对电力规划设计企业来说,尤为如此。科学管理和合理应用这些非结构化数据已经成为企业正确决策、增强核心竞争力的关键。本文详细分析了企业级非结构化数据中心对数据存储组织形式的核心需求和研究路线,结合企业实际,给出了一套相对完整的非结构化数据存储组织方案,并介绍了原形系统应用情况。该方案使非结构化数据在企业内部得到了高效存储和便捷应用,也为企业级非结构化数据中心进行数据集中存储、统一管理、标准服务奠定了坚实的基础。为企业在非结构化数据的存储和应用方面提供了可行的建设思路。     

智能配用电大数据存储架构设计

针对智能配用电数据海量、高维度、多源异构等特点,提出一种大数据存储的三层管理框架设计方案。首先,对智能配用电数据组成进行分类划分。然后,提出智能配用电数据存储的资源层、元数据层和实际数据层的三层管理框架,在资源管理层,应用虚拟化技术、负载均衡和资源调度完成对物理资源的管理;在元数据管理层,使用数据预处理技术对智能配用电的元数据进行分类,采用中间件技术完成XML元数据仓库管理;在实际数据管理层,利用NoSQL技术,通过Map和Reduce的有效结合,完成海量数据的分层分区快速存储。最后,在实验室环境下对该设计方案进行初步的应用,验证了所设计方案能够对结构化、半结构化和非结构化数据进行统一存储,可为智能配用电大数据技术的应用提供基础支撑作用。     

企业级非结构化数据中心存储组织形式探究简

非结构化数据蕴含着企业大量的核心知识和无形资产,是企业得以发展壮大的宝贵财富,特别对电力规划设计企业来说,尤为如此。科学管理和合理应用这些非结构化数据已经成为企业正确决策、增强核心竞争力的关键。本文详细分析了企业级非结构化数据中心对数据存储组织形式的核心需求和研究路线,结合企业实际,给出了一套相对完整的非结构化数据存储组织方案,并介绍了原形系统应用情况。该方案使非结构化数据在企业内部得到了高效存储和便捷应用,也为企业级非结构化数据中心进行数据集中存储、统一管理、标准服务奠定了坚实的基础。为企业在非结构化数据的存储和应用方面提供了可行的建设思路。     

智能电网中非结构化数据可视化技术研究

非结构化数据大量存在于智能电网的大数据中,其增长速度是结构化数据的25倍。然而,非结构化数据缺乏连续性,数据信息量大,不利于系统数据的可视化处理和分析。为了有效解决此问题,文章针对智能电网的实际需求,总结非结构化数据可视化处理存在的问题,利用节点链接技术获取数据、Hbase技术存储数据、分割式技术处理数据、四面体技术进行标识、建立Map Reduce检索模型,并进行显示程序编辑,旨在对智能电网的性能进行优化,从而解决智能电网中非结构化数据可视化难的问题,以及海量数据难以进行批量化处理的问题。     

智能变电站多维数据统一存储系统的设计与实现

研究变电站数据存储与访问技术,针对目前变电站一体化监控系统各业务数据存储分散、访问接口不统一、不支持非结构化数据存储等问题,提出一种兼容关系和非关系型数据库的变电站历史数据分布式存储方式,可支持站内多业务数据的统一存储,也可支持区域内所有变电站监控系统历史数据的统一存储,突破关系型数据库对图形、波形、序列数据的存储和访问限制,解决大容量数据快速写库的操作效率问题,保证操作过程的原子性和数据一致性,实现对变电站全景数据的集中管理与访问。经现场测试验证,开发出的变电站多维数据统一存储系统的功能需求和性能指标完全达到预期目标。     

大数据全生命周期中关键问题研究及应用

随着大数据时代的到来,大数据全生命周期中获取、存储、处理、挖掘等方面的研究逐步展开,成为行业、政府的研究热点。该文以国内外电力行业、金融、经济等数据为研究对象,对大数据的存储、处理、挖掘三大关键问题进行研究。根据大数据特点进行分类;建立基于改进稀疏矩阵、指标维度和指标数据分离方式的大数据压缩存储模型,实现大数据的压缩存储和动态扩展。提出按照指标分类及关联关系建立数据缓存模型的方法,实现大数据的高效访问和灵活转换。在挖掘展现时应用动态可配置的设计方法,解决数据查询海量页面的动态生成问题。该文可为大数据存储、处理、挖掘研究提供有价值的参考,并将研究成果应用到统一资源库的建设中。     

基于边缘计算与MapReduce的智能量测终端数据处理方法

针对电力物联网中海量信息数据处理时,对大型数据集的访问可能会造成智能量测终端（边缘节点）与云化主站之间的网络拥塞和操作延迟等问题,提出了一种面向智能量测终端的边缘计算结合MapReduce的数据块处理方法。首先,整合云-管-边-端各层次功能和特性,对智能量测终端处的边缘计算服务器进行合理配置;其次,利用支持块复制方法,将本地、基于分区和多归属块副本存储到各自的智能量测终端,以解决访问聚合MapReduce大型数据集的网络拥塞并减少操作延迟。最后设置了边缘计算数据块处理的安全策略,合理配置了数据通讯网关,整合安全防护流程,加强了数据块处理的安全性。     

企业非结构化数据管理平台研究简

提出在Linux集群上部署Hadoop开发框架,构建分布式的数据管理平台,实现了对企业海量非结构化数据的集中存储、统一管理以及分布式处理.平台所具有的高可靠性、高扩展性以及高吞吐率等特征为海量数据提供了不怕故障的存储和管理,为企业非结构化数据的有效利用提供了良好的解决方案.     

汾河桥主梁定位关键问题解决

本文阐述了采用减速机后轴加制动的方法解决南内环汾河大桥施工中T型主梁定位的关键性问题。     

电力系统建立Intranet可行性与必要性

电力系统内实现Intranet企业网络,已是势在必行。本文就如何利用电力系统现有的资源建工自己的Intranet企业网,实现Intranet的各项功能,为电力系统的办公提供一个全新的模式和方法,进而形成一个完整的现代化办公系统,进行了一系列的论述。     

CFB锅炉常见故障分析

详细分析了循环流化床锅炉常见的故障,如风帽磨损、过热器超温等故障,并提出相应的解决措施。     

斗轮堆取料机门座架有限元分析

门座架是斗轮堆取料机的重要部件之一，本文利用有限元技术，对门座架进行了静力强度结构分析，并把计算结果与模拟实验的结果进行了分析对比。     

液晶世界新霸主

目前．彩电市场一个新品牌-amW液晶彩电刚一上市．就引起行业的消费市场的轰动。据悉．amw集团是美国知名的IT品牌．以研制液晶技术界的专家而闻名全球。Amw属于gbm精成集团．GMB精成电子科技集团是全世界最大的电子产品生产基地之一．并在欧洲市场占有率为第一名。1998年，美国amw执巨资成立专案小组．投入液晶视角问     

EDA在温度采样控制器电路设计中的应用

以温度采样控制器为例介绍EDA技术在数字逻辑电路中的应用.     

过流保护在可控硅整流装置中的应用

随着可控硅在各种控制系统中应用的日益广泛,可控硅装置的安全运行与保护日益得到重视.本文介绍了可控硅的过流保护措施,在实践中证明是安全可靠的.     

测控系统中串行接口与通信协议

分析了四种主要串行接口的电气性能以及不同的应用特点,并结合笔者的实际应用体会,对串行接口的通信协议软件编制和操作系统环境提出了值得读者注意的问题和建议．     

电子信息系统的雷电电磁脉冲防护的新思考

本文对建筑物防雷设计规范中所制定的电子信息设备防雷击电磁脉冲方法提出质疑,从电磁脉冲的传播特性出发,提出了电子信息设备有效防护雷击电磁脉冲的方法。     

流量仪表与管道内径匹配问题的讨论

进口旋涡流量计的内径与中国标准（ＧＢ）管道内径不符引起计量误差,分析各种工况下产生误差的原因及解决方法。