一种轻量级电网实时数据ETL系统的设计与实现

以某省电网实时数据监测系统的数据中心建设项目为背景,提出了一种轻量级的,适合于电网实时数据迁移与同步更新的ETL系统解决方案.系统支持多种关系型数据库和数据文件,提供全量、增量、主细表等多种自定义模式数据迁移方案.系统利用JDBC数据库访问技术、JSR-166的Util.Concurrent并发线程包以及SWT技术,结合元数据的管理,解决了异构数据的快速抽取、清洗转换与加载、任务的调度和跨平台运行的问题,并在实际应用中表现出了实用性和稳定性.     

跨平台电网规划数据融合与存储模式

随着电网规划各业务系统平台的建立以及异构业务数据的急剧增加,急需打破各系统平台之间的业务壁垒,建立完善的业务信息共享与交互体系。文章在分析现有业务系统数据格式及存储现状的基础上,深入研究异构数据融合与存储的关键技术,并提出一种跨平台电网规划数据融合与存储模式。通过建立统一业务数据信息模型,完成异构数据的融合处理;构建基于Hadoop的分布式文件存储系统,实现海量异构数据高效快速的存储与索引,为电网规划系统乃至电力行业的海量异构数据与信息共享提供理论指导与体系架构支撑。     

一种异构系统间的通信平台的设计与实现

在各监控系统中同时存在着多种操作系统和多种通信方式,如Windows、Linux、Unix,串口通信、网口通信等。如何屏蔽操作系统以及通信方式的差异,使通信过程对上层用户透明,是重要的问题。文章提出了一种分层式的通信平台设计方法,即将通信平台分为通信底层和通信代理层。通过这种方法的使用可以将上层应用与底层通信分离开来,既能使上层应用关注其应用逻辑,又能高效、安全地实现跨平台的数据通信,使上层应用系统的通信更加方便,很好地解决了异构系统间的通信问题。     

基于ETL技术的电网运行全景建模*

在南方电网开展的一体化电网运行智能系统研究和建设中,针对电力二次系统数据的多样性和孤立性现状,提出了利用ETL技术处理信息共享的方案。该方案将多系统模型数据抽取、转换并集成到统一的电网全景模型中为多系统所共用,其正确性和有效性在实践中得到了验证。     

基于数据仓库ETL技术的电力技改大修项目数据清洗方法

由于重复数据和空缺数据数量多,电力技改大修项目数据清洗方法不能实现脏数据的有效清洗,为此研究 基于数据仓库ETL技术的电力技改大修项目数据清洗方法.通过对多数据源的电力技改大修项目脏数据质量的评估, 判断符合预期标准后进行数据挖掘;结合数据仓库ETL技术对重复数据记录进行清洗;运用切比雪夫定理处理电力 技改大修项目数据空缺值来完成对电力技改大修项目数据的有效清洗.实验结果表明,运用该方法清洗数据有效率最 高,有效提高了数据的质量,实现了对数据的高质量清洗.     

一种厂站实时数据网络系统的设计与实现

文章介绍了利用ＲＴＵ资源，开发出一种实用、价廉的实时数据网络系统，该系统功能全面、运行安全可靠，有良好的系统可扩充性，对提高厂、站监控自动化水平，有广阔的应用前景。     

一种大中型水电厂监控系统实时数据分流方法

介绍了典型的水电厂监控系统结构和系统实时数据分类方法。提出了一种大中型水电厂监控系统的实时数据分流方法,描述了该方法的总体目标、设计思想和总体结构,从跨平台实现、事件传输、同步数据传输、负载均衡等方面对该方法进行了详细说明,并介绍了该方法的应用。     

电网监控系统实时数据库的设计与实现

实时数据库技术成为数据库技术发展的一个新方向,通过实时数据库系统能够很好地实现过程监控系统中数据的管理、交换和共享.通过研究实时数据库技术、面向对象技术,提出了面向对象实时数据库系统的设计思想,并根据电网监控系统的实际需要,利用Visual C 语言,开发出电网监控系统的实时数据库系统平台.     

异构系统间数据远程调阅的方法与实现

在智能电网大运行体制背景下,上级调度需要获取大量下级调度乃至变电站的数据信息,用于分析监视整个电网调度监控系统应用现状。由于异构系统间客观存在的数据壁垒,当上下级调度采用异构系统时,数据的共享实现非常困难。文中介绍了一整套关于异构系统间数据远程调阅的方法及实现方案,解决了异构系统间数据调阅的难题,减轻上级调度系统的压力,有利于大运行模式地监视。     

电网监控数据库间的实时交换算法及应用

从电网监控系统要求多数据库管理系统的特点出发,分析其数据库系统是异构的,提出一种在异构数据库间进行直接数据交换的算法（DDIF）,通过实际系统的检测,说明该算法能满足电网监控实时性的要求,在实际应用中具有较大的实用价值。     

生产实时监管系统的设计与实现

根据发电企业生产管理特点,设计了一套完整的生产实时监管系统。系统集成了生产过程实时监控、运行重要事件自动监视和报警、性能计算与经济分析、重要指标在线对比分析、综合报表等功能模块,实现发电企业各部门、电厂之间生产数据的传输和共享。使相关人员可以快速、准确地掌握各电厂生产运行状况,提高发电企业的信息化水平和管理水平。     

全国产工业数据中间件的设计与实现

工业数据中间件是全国产厂级监控信息系统(SIS)的基础软件平台之一,基于国产软硬件设备、完全自主可控的高性能工业数据中间件是保障我国电力生产信息安全的中坚力量.在分析常用中间件技术的基础上,对西安热工研究院有限公司研发的全国产睿通工业数据中间件进行详细介绍,重点介绍了其设计思路、系统架构和部分关键技术的实现.睿通工业数...     

电网监测系统中数据网关的实现

论述了在Windows 98环境下，基于Visual C 6.0开发平台，利用多线程技术，ODBC标准，TAPI和WinInet接口开发的电网监控系统的数据网关，从而实现将地理分布离散的各变电站保护设备故障信息在调度中心集中管理，并进一步把故障数据转发到网络数据库和Web服务器，使故障信息数据在电力系统的MIS网上被共享，数据网关不仅管理信息数据，而且是具有强大的计算与分析功能的工程师工作站，可进行波形分析，故障定位等处理。     

基于SCADA—MIS数据接口的电网实时信息监控系统

论述了ＳＣＡＤＡ－ＭＩＳ数据接口的结构,设计,软件实现,介绍了基于此数据接口的电网实时信息监控系统在实际电网管理中的作用与地位,并就开发中问题进行了探讨。     

分布式异构实时监控数据库系统的设计与实现

在开发发电厂分布式实时监控与数据库管理系统时 ,常常遇到这样的两个问题 :一是在作发电机组的实时监控与实时数据库管理系统的开发过程中 ,各系统的开发是分批进行的 ,也就是说如果某发电厂有四台发电机组 ,可能由于投资方面的原因 ,需要 2～ 4年才能完成 ,而且每台发电机组的系统开发组织不是同一个 ;另外一个问题是当所有的独立系统开发完成之后 ,由于各个系统所使用的网络技术和网络体系结构各不相同 ,各系统所开发的数据库也各不相同 ,因此需要将它们进行集成 ,形成全盘的实时分布式监控与数据库管理系统 .本文对以上遇到的问题进行了比较详细的讨论 ,对异构网络的互连方案、异构网络环境下实现分布式特性的解决方案、异构网络环境下的实时通信问题的解决方案以及异构数据库系统之间的数据交换与实时共享问题的解决方案进行了设计 .     

数据交互在工程项目管理系统中的设计与应用

基于大数据,构建数据统一的管理平台,使其能集成多个线上业务系统数据,并以数据可视化的方式进行日常数据交互配置和数据异常传输监测.通过在工程项目管理系统中应用该平台,使各企业数据对接时,操作更为规范、统一、清晰.     

一种嵌入式Linux轻量级GUI系统设计

介绍了一种基于嵌入式Linux的轻量级GUI系统——SimGUI的设计和实现过程,系统独有的事件响应引擎和事件过滤器机制,使SimGUI系统具有轻型、高实时性、反应速度快的特点。     

跨平台信息系统数据迁移技术研究与实现

河北公司营销分析与辅助决策系统运行所依托的小型机设备已运行多年,近年来IBM9116-561型号设备稳压模块存在家族缺陷,存在因设备故障导致营销类数据报表无法正常报送的风险,影响系统的安全稳定运行。基于以上因素的考虑,本文主要讲述ETL、Sybase数据库从现有小型机环境迁移至PC服务器设备过程中涉及的关键技术,主要包括:①Informatica及工作流导出和导入;②Sybase和ETL抽取工具的衔接;③新环境数据抽取。通过以上方面的技术研究,不仅有效解决了系统运行过程中存在的问题,为后续更好地开展运维工作打下基础,也为其他系统跨平台迁移提供了经验,具有很好的借鉴意义和价值。     

江苏电网励磁系统数据库的设计与实现

介绍了关系数据库和网络技术在数据库开发方面应用,研制了江苏电网励磁系统数据库。重点阐述了励磁系统数据库的总体设计构建、安全性能以及励磁系统数据操作、数据转换接口及日志记录等方面的功能。     

基于Qt的SCADA系统数据服务器软件设计

提出了基于Qt设计SCADA系统数据服务器应用软件的设计思想,利用Qt具有跨平台运行的特性,可以从根本上解决常规的数据服务器软件对异构服务器要编制不同的软件且软件开放性较差的问题。具体分析了数据服务器应用软件的功能模块,并给出了关键模块用Qt的类以及相关函数的实现过程。