分布式数据存储策略在智能电网中的应用

随着电力系统的不断发展,智能电网已迅速延伸至国民经济的多个领域,成为电力系统未来发展的重要方向。针对大规模智能电网中海量动态感知数据的存储问题进行了深入研究,并充分考虑了智能电网对数据的传输、存储与查询的客观要求,提出了以数据为中心的分布式数据存储方法来处理智能电网运行过程中所产生的海量数据的存储策略。研究结果表明,该方法能够达到负载均衡、降低系统能耗,增加系统存储能力和存储效率的目的。     

电网量测数据海量终端的前置中间件技术研究

针对目前智能电网状态监测与分析中面临的WAMS、SCADA、AMI等量测系统海量、多源、高速数据处理问题,提出一种海量终端的数据前置处理中间件技术,着重解决海量数据中目标信息高效挖掘与处理器负载均衡问题。在前置数据处理中间件架构中设计了基于采样的目标信息数据并行挖掘算法,同时通过基于Map-Reduce并行计算模型及轮转算法思想均衡负载,以采样挖掘方式聚合数据内联关系,设计出单机多核并行数据挖掘策略。通过广域电网中海量PMU数据进行对比测试,结果表明文中提出的中间件技术可以有效的提高挖掘速度和多处理器负载均衡度,同时极大地减轻海量数据挖掘中的内存负担。     

一种云环境下智能电网中的重复数据删除机制

随着智能电网的发展,电网运行的实时数据呈海量化急剧增加,传统数据中心压力日渐攀升。文章研究了电网数据的高效存储,讨论了智能电网云平台架构以及云环境下资源分配和动态负载均衡,使得智能电网中大量相同的数据以更加轻便的方式存储。本研究从数据存储到数据查询,形成了一个完整的对智能电网数据进行空间优化操作的体系,实现了云的实际利用价值。     

基于状态估计的海量多元异构智能电网数据压缩存储方法

海量多元异构智能电网数据未经处理就进行压缩与存储,存在压缩误差大、运行时间长的问题,影响压缩储存效果。因此,提出基于状态估计的海量多元异构智能电网数据压缩存储方法。融合海量多元异构智能电网数据,推导出准确的智能电网数据,通过Tucker分解智能电网大数据压缩方法,压缩海量多元异构智能电网数据。采用可扩展标记语言（XML）技术预处理数据,结合非关系型的数据库技术,实现海量多元异构智能电网数据的快速存储。试验结果表明,该方法的线路电阻、电抗动态参数估计准确性高,数据压缩平均绝对误差、F 范数误差低,运行时间短,具有一定的实际应用性能。     

虚拟局域网技术在智能电网中的应用研究

智能电网运行过程的管理需要海量的数据。如何快速可靠地传输、处理和存储这些数据成为有效管理智能电网的必要课题。在分析智能电网管理基本特性的基础上,设计了三层交换的虚拟局域网(VLAN),将分布式智能电网数据管理体系有效划分为不受地理位置限制而逻辑通信单元清晰的子系统,可以有效减少网络的拥堵,提高智能电网数据处理的效率。     

基于开源软件的电网雷电大数据平台技术研究与应用

针对当前电网海量雷电数据在采集、存储与计算方面存在的技术瓶颈,该文采用互联网时代大数据主流技术,提出了构建基于开源软件的电网雷电大数据平台。首先,分别介绍了电网雷电大数据的特征和大数据软件技术的选型;其次,对电网雷电大数据平台进行了总体架构设计,并研发了海量数据高效采集、多源异构数据存储与分布式快速计算等关键技术;最后,详细阐述了雷电大数据平台在电网中的典型应用场景。通过建立电网雷电大数据平台,可以有效提升海量雷电数据的处理能力,为深入挖掘雷电数据潜在价值提供技术支撑,对于电网防雷减灾工作具有重要的意义。     

跨平台电网规划数据融合与存储模式

随着电网规划各业务系统平台的建立以及异构业务数据的急剧增加,急需打破各系统平台之间的业务壁垒,建立完善的业务信息共享与交互体系。文章在分析现有业务系统数据格式及存储现状的基础上,深入研究异构数据融合与存储的关键技术,并提出一种跨平台电网规划数据融合与存储模式。通过建立统一业务数据信息模型,完成异构数据的融合处理;构建基于Hadoop的分布式文件存储系统,实现海量异构数据高效快速的存储与索引,为电网规划系统乃至电力行业的海量异构数据与信息共享提供理论指导与体系架构支撑。     

基于云计算的智能电网状态监测数据的处理

在智能电网环境下,状态数据具有广域、全景、海量和可靠的特征,传统的存储硬件采用磁盘阵列,数据库管理软件采用关系数据库系统的方法由于系统扩展性差、成本高、可靠性低,难以适应要求。提出了一种基于云计算的智能电网状态监测平台,并且重点介绍了数据存储与处理的新方法。     

实时数据库系统研发及其在智能电网中的应用

随着智能电网的发展,电网生产实时数据呈现出数据量大、实时性强等特点。为满足智能电网对海量实时数据处理需求,基于多线程实时处理技术,研发了一种实时数据库管理系统。文章介绍了该系统特点及系统结构,及其在用电信息采集、智能园区、能效管理平台、变电站热点监控等智能电网领域中的应用情况。该系统很好地实现了智能电网海量实时数据的采集、处理、分析、存储及展示,满足智能电网海量实时数据采集频率高、数据量大的应用需求。     

基于广东电网数据仓库大数据架构研究

随着电网智能化建设和规模的持续扩大,每天都会产生各种结构的海量数据,传统的数据架构已经无法满足高效低成本的数据存储以及处理。根据电力大数据的特点和发展趋势,结合广东电网数据仓库的现状,从公司业务特点和实际需求出发,提出一种高效的数据分析处理的数据架构,并分析了该架构的数据存储、数据查询和数据整合等方面的关键技术。