一种磁盘历史数据库模型研究

为解决流程工业中过程历史数据的存储以及大量数据的快速查询问题,提出一种基于关系数据库的磁盘历史数据库模型。在数据存储方案设计中,将关于位号和数据采集接口的静态信息存储在关系数据库中,历史数据以文件形式存放,采用三重二级缓存机制避免频繁访问磁盘,并使用经典的SDT算法对实时数据进行压缩存储,降低存储成本。数据查询方案采用三级索引文件结构,即总索引文件、二级索引文件和位号索引文件,提高查询效率。该磁盘历史数据库的第一版已经成功实现,应用结果表明,数据存储方案和查询方案的设计是合理的,100个位号的查询时间约为500 ms。     

基于Web的炼焦实时监视系统设计与实现

针对某钢铁企业炼焦生产过程中网络监控的需求,提出一种基于Web的三层B/S体系结构.首先利用ESP-iSYS实时数据库和SQL Server关系数据库,实现了数据存储层的实时数据采集与数据处理;然后采用基于TCP/IP协议的TCPPublish服务和基于XML的ADO.NET技术,实现业务逻辑层对实时数据库和关系数据库的访问,并通过SOAP方式调用实时数据库的WebService接口实现趋势曲线的实时绘制;最后采用SSL加密和多级区域权限体系作为系统的安全策略.实际运行表明,该系统实现了对炼焦生产全流程作业的实时监视,并有效地保证了数据传输的实时性和安全性.     

实时数据库与关系数据库数据交换服务的设计与实现

实时数据库和关系数据库有各自不同的特点,随着信息化水平的不断进步,在实际的过程控制计算机系统和信息管理系统中往往将两种数据库结合使用。数据交换服务为不同数据库之间的互连互通提供加载、转换、传输和存储等功能。本文描述了数据交换服务的设计与实现过程,着重介绍了实时数据库与关系数据库相互通讯时用到的数据转换和存储的方法。     

用VC实现PHD的历史数据存储

针对石化企业MES系统中的历史数据库部分,介绍了用VC实现从PHD实时数据库到ORECLE的历史数据存储;在石油炼油与化工运行系统(MES)的实施中,PHD实时数据库是系统的一个模块,通过自带的RDI(实时数据接1:2)连接DCS和PLC等数据采集设备,并通过PHD—PHD的数据采集方式实现了对大量重要的实时生产数据的采集、加工和处理以及对大量的历史数据的长期存储,并能提供多种访问PHD服务器数据的方式。论述了PHD实时数据库的数据采集方式、数据存储和数据处理。介绍了PHD Server访问数据的主要方法,并提出了应注意的几点问题。     

实时数据采集技术在生产制造执行中的应用

以公司生产制造执行系统实施为背景,针对生产制造执行在钢铁企业的实际需求情况,结合数据采集系统在制造企业的运用现状,阐述了实时数据采集系统在生产制造执行中建设的必要性。根据运用实时数据库、OPC、CORBA等技术,以新建实时数据库系统为基础,实现工业现场基础和过程自动化系统的数据采集、实时数据存储和信息系统关系数据库转换等功能的实时数据采集系统的实施内容,对系统建设过程中的体系构建、软件结构和接口框架作了简要阐述,对系统开发过程中的信息技术和应用后的主要功能和效果作了概要说明。     

USB-HOST实时数据采集嵌入式模块的实现

USB是一种得到了广泛应用的新型总线,被数据采集和仪器设备大量采用.文章描述了一种基于嵌入式USB主机的实时数据采集嵌入式模块,该系统由嵌入式USB主机控制器采实现数据存储,使仪器可以脱离PC独立运行和将数据存储在移动USB设备中,扩大了该设备的使用范围.     

多源异构电网运行时标量测数据接入方案设计

海量准实时数据服务平台是电网运行时标量测数据集中存储的场所;为了满足电网调度自动化、计量自动化等电网运行数据的接入需求,提出一种多源异构电网运行时标量测数据接入方案;该方案综合采用关系数据库和实时数据库存储数据,结合实时数据库存储数据的测点特性定义了电网时标量测数据存储命名规范,通过配置服务实现数据接入任务的启停控制和运行状态监控,使用接入调度器调度接入插件执行接入任务并引入主备冗余技术保证调度器的高可用;方案引入组件化程序设计思想,通过可插拔、易扩展的插件设计满足多源异构数据的接入需求;方案在南方电网公司海量准实时数据服务平台建设项目中得到实际应用,很好地满足了南方电网运行时标量测数据的接入需求。     

化工仓储企业储罐数据采集系统的设计与实现

针对化工仓储企业设备种类较多、各生产单元之间信息孤立、生产数据得不到实时准确测量等问题,设计开发了一个实时数据采集系统。该系统利用不同的数据通信规范,从各种异构系统中获取生产数据,并通过网络协议进行传输存储,实现了罐区数据的实时准确测量。该系统自投用以来运行效果良好,有效地解决了企业数据采集过程中存在的问题,对提高企业信息化水平具有重要的意义。     

三分量检波器数据采集软件的设计与实现

介绍了三分量检波器数据采集软件系统的设计思想与具体实现。通过大量的试验证明,系统实现了地震数据的快速采集和存储、图形的实时显示,取得了不错的效果。     

电动汽车远程监控与服务系统开发

针对电动汽车设计了远程监控与服务系统。该系统基于数据采集和无线远程数据传输,实现了车辆运行参数的实时上传与存储。车载控制器完成数据采集与发送,服务器按照模型对象对数据进行存储、分析与处理,客户端为用户提供监控和命令视图,实现车辆的监控功能。服务器通过对运行数据进行分析处理获取车辆服务信息并发送给车载终端控制器,实现车辆的远程服务功能。该系统在长城A0级小型城市纯电动轿车试验样车上测试,具有良好的实用性及稳定性。     

Advantages of complex SQL types in storing XML documents

This contribution looks at and evaluates new ways to map XML documents to relational database systems preserving their hierarchical structure. In particular we take advantage of the advanced features available following the SQL:2003 standard, which defines complex structure and collection types. Starting out with a survey of existing methods, basic questions concerning appropriate and efficient forms of mapping XML documents to SQL-compliant data types are addressed. This leads to a reversible conversion method, which is subsequently implemented in a prototype application. The design of the mapping is geared towards existing, mature relational database management systems (DBMS). It turns out that among the products considered, IBM Informix seems to offer the best support for complex structure and collection types in the context of our application. To better assess the performance of the mapping process, the observed running time and the required in-memory and database storage of the implementation are measured and evaluated.     

航天测控信息数据库实时优化管理策略研究与应用

为提高和优化测控信息数据库实时性能,设计了一种基于内存数据库与关系数据库的两级实时存储模型,文章详细阐述了两级数据库的存储机制及其生命周期,分析归纳了实时测控信息的特征及存储策略,提出了内存数据库基于“T树”＋“哈希”索引相结合的白适应索引算法和两级数据库实时数据同步机制等关键技术,从而提升和优化了数据库的实时性、可靠性和安全性,为今后实时的扩展应用提供了可靠数据保证．     

内容管理系统存储层的设计与实现

为有效达到内容管理系统在海量数据的存储,以及在高并发请求下仍能快速响应用户的请求的目的,在研究了传统存储管理方式和分析了在系统中使用关系数据库将会遇到的问题后,采用开源软件Hadoop作为底层分布式存储基础,设计和实现了此时的内容管理系统的存储层,以满足系统快速读取内容的需求。介绍了系统的内容组织管理模型,针对系统快速读写内容的需求,对读写机制进行了改进、优化和封装,并通过实验测试来验证正确性和可行性。     

互动式游戏数据库的数据存储与管理

互动游戏的实时与动态交互性要求游戏能够快速调用存储介质中的图像、语音、动作等多媒体数据,作为游戏角色参与游戏。针对该特性,设计适合于互动游戏的专用数据库管理软件,构建能够存储和管理多媒体数据的基于关系的数据库模型,从物理存储和逻辑语义2个方面探讨基于Hash的多媒体数据的存储与管理方法。     

一种基于NoSQL数据库的医疗监护大数据存储设计

移动医疗、家庭远程监护等患者健康管理模式的兴起,产生了海量的医疗监护数据,在对患者的海量健康数据处理时存在性能瓶颈问题。文章首先介绍了医疗实时监护大数据的特征和应用模型,分析了当前关系数据库存储海量医疗监护数据存在的问题,比较了多种NoSQL数据库的特性,提出了使用HBase分布式非关系数据库进行医疗监护大数据存储的方案,并给出了主要表结构设计,最后对HBase数据库的部署、表数据访问进行说明。     

Streaming data analytics via message passing with application to graph algorithms

The need to process streaming data, which arrives continuously at high-volume in real-time, arises in a variety of contexts including data produced by experiments, collections of environmental or network sensors, and running simulations. Streaming data can also be formulated as queries or transactions which operate on a large dynamic data store, e.g. a distributed database.     

基于关系数据库的网络数据采集与管理

1 引言网络管理是基于数据的。分布在网络各处的被管设备维护着大量的配置和状态信息,网络管理系统(NMS)通过网络管理协议(如SNMP、CMIP)与被管设备上运行的管理代理通信来获取这些信息,了解当前网络状况,记录和分析历史数据,进而采取相应的管理措施。可以说,数据是各类网络管理应用的基础:无论是运行监视、阈值告警、计费统计,还是高层次的决     

PostgreSQL与MongoDB处理非结构化数据性能比较

互联网技术的发展产生的海量非结构化数据在传统关系型数据库中难以被高速有效地进行存储和处理,各类NoSQL数据库可以有效存储处理非结构化数据,但是对关系运算功能的弱化难以满足应用场景的需求。具备非结构化数据处理能力的新型关系型数据库提供了适用多种应用场景的高效存储方式。为了能够定量地比较关系型数据库和面向文档的NoSQL数据库的数据存储与处理能力,比较了PostgreSQL的hstore数据类型和MongoDB的内嵌文档对非结构化数据的储存方式,并通过非结构化数据的批量加载、磁盘占用、主键查询、非主键查询、地理空间坐标查询等方面的对比来以分析性能特征与适用场景。     

DrawCAD: using deductive object‐relational databases in CAD

Computer‐aided design (CAD) involves the use of computers in the various stages of engineering design. CAD has large volumes of data with complex structures that need to be stored and managed effectively and properly. Database systems provide general purpose programs that can be used to access and manipulate large amounts of data stored in the database. They also provide an independence between the program accessing data and the database. It is therefore important to use database systems to store CAD data in the most efficient and effective manner for easy retrieval and better management. Graphical objects can be created, in CAD, by reusing previously created objects. The data of these objects have references to the other objects they contain. Deductive object‐relational databases not only provide direct support for the effective storage and efficient access to large amounts of data with complex structures on disk, but also perform the inferences and computations to obtain the complete data of graphical objects that reuse other objects. They should be able to play a major role in CAD systems. This is the idea behind the development of the DrawCAD system. DrawCAD is a CAD system built on top of the Relationlog object‐relational deductive database system. It facilitates the creation of graphical objects by reusing previously created objects. The DrawCAD system illustrates how CAD systems can be developed, using database systems to store and manage data and also perform the inferences and computations that are normally performed by the application program. Copyright © 2003 John Wiley & Sons, Ltd.     

基于实时数据流分析的钢铁产品质量监测

针对钢铁企业生产过程中普遍存在的质量分析和监测问题,开展了基于实时数据流分析的产品质量监测的应用研究。结合实时数据库和关系数据库,设计了具有实时监控以及离线追踪的钢铁生产线实时监控系统。着重研究了实时数据采集和实时数据分析,并提出了基于实时数据流的产品质量监测方法,实现了企业对产品生产线的实时追踪和产品质量的全程跟踪管理。