对用电营销系统数据存储升级改造的探讨

通过对目前用电营销系统数据存储架构与技术的现状分析，提出数据存储升级改造的可行性设计方案、原则与思路，并对设计方案的特点与优势进行探讨。     

智能配用电大数据存储架构设计

针对智能配用电数据海量、高维度、多源异构等特点,提出一种大数据存储的三层管理框架设计方案。首先,对智能配用电数据组成进行分类划分。然后,提出智能配用电数据存储的资源层、元数据层和实际数据层的三层管理框架,在资源管理层,应用虚拟化技术、负载均衡和资源调度完成对物理资源的管理;在元数据管理层,使用数据预处理技术对智能配用电的元数据进行分类,采用中间件技术完成XML元数据仓库管理;在实际数据管理层,利用NoSQL技术,通过Map和Reduce的有效结合,完成海量数据的分层分区快速存储。最后,在实验室环境下对该设计方案进行初步的应用,验证了所设计方案能够对结构化、半结构化和非结构化数据进行统一存储,可为智能配用电大数据技术的应用提供基础支撑作用。     

多源异构的智能配用电数据存储处理技术

针对智能配用电数据具有海量、多源异构等特点,提出一种基于Hadoop的智能配用电数据存储处理的框架设计方案。在对智能配用电数据组成进行梳理的基础上,提出了智能配用电的资源、存储和查询三层数据存储框架。其中,资源层采用Hadoop集群架构,结合电力系统的行业特色,完成IT存储资源管理;存储层则先采用XML技术进行数据预处理,使非结构化数据归一化,然后利用No SQL数据库通过Map和Reduce的有效结合,完成海量数据的快速存储;查询层利用Top-k检索技术,实现海量数据的快速查寻。该设计方案能够对结构化和非结构化数据进行统一存储,可为智能配用电大数据技术的应用提供基础支撑。     

用电信息采集系统非结构化数据管理设计

针对用电信息采集系统的非结构化数据具有海量、接入点多而分散等特点,本文提出一种用电信息采集系统非结构化数据管理设计方案。首先,对用电信息采集系统的非结构化数据进行分类。其次,提出了数据采集、数据存储和数据挖掘等3部分的管理设计方案:数据采集主要实现非结构化数据的收集;数据存储包括数据预处理和Hadoop两部分,完成海量数据的快速存储;数据挖掘按照文本、视频、音频3种类别分类处理,实现海量数据挖掘应用。该方案对用电信息采集系统的海量非结构化数据管理,有一定的参考价值。     

基于DDR2的DSO分区交替深存储技术研究

具有深存储功能的数字存储示波器(DSO),能够将大量的采集数据存储下来,大大提高了采集到的波形数据的信息含量,能够很好的再现波形细节,为工程师分析信号、解决问题提供了极大的便利.设计采用FPGA外挂DDR2 SDRAM颗粒的方式来存储采集数据,并利用FPGA内部的MCB IP核来控制其读写和刷新.以此为基础,研究了基于DDR2 SDRAM颗粒的基本深存储设计方案,提出了分区交替深存储技术,并分析了该技术对提升DSO深存储性能的作用及具体实现方法.该技术解决了示波器停止状态下读取DDR2 SDRAM颗粒数据与写DDR2SDRAM颗粒之间的矛盾,并在实际测试中取得了很好的效果.     

基于单路FIFO的多通道同步采集存储系统的研究

设计了一种多通道同步采集存储测试系统,利用CPLD（复杂可编程逻辑器件）和单路FIFO（先入先出存储器）缓存实现了四路ADC同步转换数据到FLASH存储器的数据存储方式。此设计方案实现了在采样速率变化的情况下, FIFO自适应完成缓存速率调整的功能,并且多通道数据能连续不间断地存储到FLASH存储器中。这对于多通道变采样的存储测试系统设计具有一定的借鉴意义。     

WebGIS系统中的空间数据存储

介绍了Oracle Spatial对空间数据的组织和管理方法。针对目前配电网WebGIS在数据存储上的不足,提出了一套配电网WebGIS系统空间数据库分析和设计方案,并对数据上载时可能遇到的样式丢失、文本显示错误等问题给出了解决的方法,为基于Oracle Spatial的GIS应用开发提供了新的思路。通过GIS与Oracle Spatial空间数据库集成技术的研究,实现了空间数据和属性数据的一体化存储和管理,系统综合运用了MapXtreme组件技术、Oracle Spatial空间数据库技术,已将该研究成果应用于河北某县地理信息系统的建设中。实践证明配电网WebGIS空间数据库设计方案具有稳定、高效和可扩展等特性。     

基于单路FIFO的多通道同步采集存储系统的研究

设计了一种多通道同步采集存储测试系统,利用CPLD(复杂可编程逻辑器件)和单路FIFO(先入先出存储器)缓存实现了四路ADC同步转换数据到FLASH存储器的数据存储方式.此设计方案实现了在采样速率变化的情况下, FIFO自适应完成缓存速率调整的功能,并且多通道数据能连续不间断地存储到FLASH存储器中.这对于多通道变采样的存储测试系统设计具有一定的借鉴意义.     

基于CPLD的线阵CCD的驱动及数据采集

本文介绍了基于CPLD的线阵CCD的驱动和数据采集系统的软硬件构成、工作原理及设计方案,讨论了图像采集、数据存储等技术,并对系统的测量结果进行了分析。结果表明,该系统实现了对线阵CCD的正确驱动和数据的实时采集存储,结构简单,可进一步应用于高精度的一维尺寸测量。     

基于FPGA的多路交流信号同步采集系统的实现

分析了传统微机继电保护数据采集及存储结构,提出一种多路交流信号同步采集的设计方案。设计采用自顶向下的设计方法,使用一片FPGA完成A/D采样控制和数据存储的集成。解决了传统的数据采集系统运行效率不高,软件编程复杂的问题,实现了数据同步采集及存储和通道可选择控制等功能,此外给出了使用嵌入式逻辑分析仪的测试结果。     

基于FPGA的多路交流信号同步采集系统的实现

分析了传统微机继电保护数据采集及存储结构,提出一种多路交流信号同步采集的设计方案.设计采用自顶向下的设计方法,使用一片FPGA完成A/D采样控制和数据存储的集成.解决了传统的数据采集系统运行效率不高,软件编程复杂的问题,实现了数据同步采集及存储和通道可选择控制等功能,此外给出了使用嵌入式逻辑分析仪的测试结果.     

配电网WebGIS系统中的空间数据存储

针对目前配电网WebGIS在数据存储上的不足,提出了一套配电网WebGIS系统空间数据库分析和设计方案,并对数据上载时可能遇到的样式丢失、文本显示等问题给出了解决的方法,为基于OracleSpatial的GIS应用开发提供了新的思路。     

图像存储与实时显示系统设计与实现

针对大面阵CCD摄像机需要实时无压缩记录的要求,在分析了数字视频的信号特点和SCSI系统数据传输过程的基础上,提出了利用FPGA将图像数据分路处理:一路原始图像数据经SCSI控制器以DMA方式直接写入SCSI磁盘阵列;另一路图像数据经过FPGA处理后由PCI接口进入计算机内存实时显示的设计方案.直接访问磁盘空间的存储方案指出了传统存储方案的不足,使用DMA技术解决该问题.并分析了SCSI磁盘存储时间,以及数据块大小对磁盘存储速度的影响.由于原始图像数据没有使用PCI接口,而是直接访问SCSI磁盘,其存储速度得到了很大提高,达到高速存储目的.实验结果表明,使用改进的存储方式,在输入图像分辨率为2K×2K,工作频率为25 f/s时,SCSI速度存储速度达到1 200 Mb/s,存储系统工作稳定,可靠,很好地满足工程需求.     

面向智能建筑集成管理系统的轻量级实时数据库设计

根据智能建筑集成管理系统中实时数据管理的特点,开发了面向智能建筑集成管理系统的轻量级实时数据库,实现了集成系统实时数据的存储和管理.介绍了基于Java语言的实时数据库设计方案,并详细讨论了数据库的内部架构及实时数据管理策略.     

基于FPGA及数字倍频技术实现数据同步采集的研究

应用GPS授时技术提出一种电力系统交流电气信号同步采集的设计方案。设计采用自顶向下的设计方法,选用了可编程逻辑控制器件FPGA芯片作为硬件开发平台完成GPS系统对时、数字倍频、A/D转换同步采样控制和数据存储的集成。实现了电力系统内部不同变电站之间以及变电站内部不同单元之间数据同步采集及存储等功能。此外给出了使用综合开发平台Quartus II设计软件进行的仿真与分析。数据同步采集在电力系统集成保护中具有实际应用价值。     

基于FPGA及数字倍频技术实现数据同步采集的研究

应用GPS授时技术提出一种电力系统交流电气信号同步采集的设计方案.设计采用自顶向下的设计方法,选用了可编程逻辑控制器件FPGA芯片作为硬件开发平台完成GPS系统对时、数字倍频、A/D转换同步采样控制和数据存储的集成.实现了电力系统内部不同变电站之间以及变电站内部不同单元之间数据同步采集及存储等功能.此外给出了使用综合开发平台Quartus II设计软件进行的仿真与分析.数据同步采集在电力系统集成保护中具有实际应用价值.     

电网海量实时数据服务平台设计

为了能够为电网中各系统间海量数据的挖掘、分析、交互、共享提供数据服务平台,提出了对数据通信接入格式、数据存储以及相关服务接口标准化的海量实时数据服务平台.在分类分析现有控制、监视和管理系统中实时数据信息的基础上,研究并设计了统一的实时数据接入格式,并且详细描述分析了服务平台相关的设计方案.     

发电厂电气监控系统中实时数据库的应用

传统的关系型数据库不能满足电气监控系统对实时数据快速响应的要求,而实时数据库系统能够很好地实现对监控系统中的数据管理、交换和共享。根据发电厂电气监控系统的特点提出实时数据库的设计方案。介绍了实时数据库的核心部分内存数据库的设计,并对其存储结构、事务管理等方面进行了探讨。     

基于大数据的主网生产运维数据分析系统设计

主网生产运维的数据存在差异性大且统一困难、数据集成度与共享性不足等问题,造成这些数据利用率低且应用不充分,已不能满足主网生产运维的要求。本文提出基于大数据的主网生产运维数据分析系统设计方案用于解决这些问题。本文在分析主网生产运维数据特点的基础上,设计了包含数据存储、设备缺陷图谱分析、基于众包的设备故障修复、输变电设备健康度评估、主网精益化作业管理等功能的数据分析系统。该系统对主网生产运维数据进行分布式存储、关联分析、深度挖掘。此外,本文以大数据平台为核心设计了系统的软件架构,重点阐明了主网生产运维数据的存储原理。本文设计的系统面向主网的生产运维人员,旨在为他们提供设备检修、精益化管理等高级服务。     

基于Berkeley DB的配电终端的设计

智能电网建设过程中配电终端起到了越来越重要的作用,功能也不断增强。本文针对配网建设中配电终端功能多样化,存储数据大等需求,提出了基于BerkeleyDB的配电终端设计思路。在嵌入式操作系统的基础上,实现了历史信息的快速存储、查询和删除等操作。搭建试验平台与简单文件存储方式进行了对比试验和分析,试验结论表明该设计方案存储效率高、查询删除速度快、占用CPU资源少,具有明显的优势。研发的配电终端已经成功应用在北京等地,运行结果可靠稳定,能够满足用户需求。