基于内存数据库的OPC监测系统的设计与实现

工业OPC实时监测系统要求系统能够快速响应并及时处理大批量实时数据,传统关系型数据库较难满足,内存数据库能够较好地完成实时监测系统的实时海量数据处理,及时反馈数据信息.文章将内存数据库技术引入工业OPC实时监测系统,与传统关系型数据库相互融合,提出了一个基于内存数据库技术的工业OPC实时监测系统的架构模型.该模型在保证存储海量历史数据的同时,提高OPC监测系统的实时性、稳定性,满足OPC实时监测系统的需求,具有较好的实时监控效果,可以用于工业OPC实时监控系统中.     

基于内存数据库的OPC监测系统的设计与实现

工业OPC实时监测系统要求系统能够快速响应并及时处理大批量实时数据,传统关系型数据库较难满足,内存数据库能够较好地完成实时监测系统的实时海量数据处理,及时反馈数据信息。文章将内存数据库技术引入工业OPC实时监测系统,与传统关系型数据库相互融合,提出了一个基于内存数据库技术的工业OPC实时监测系统的架构模型。该模型在保证存储海量历史数据的同时,提高OPC监测系统的实时性、稳定性,满足OPC实时监测系统的需求,具有较好的实时监控效果,可以用于工业OPC实时监控系统中。     

用于HLA实时仿真的内存机制数据库开发

介绍了内存机制数据库的研究与开发的主要内容.随着计算机技术的发展和仿真应用的变化和高层体系结构HLA的出现,改变了计算机仿真技术研究和应用的格局.针对体系仿真对实时性的高要求,提出一种新的提高体系仿真实时性能的方法,即利用内存机制数据库技术来解决实时性需求.它能够高速缓存后台数据库中的数据,依靠内存机制数据库对这些数据进行管理,构成内存数据库管理系统.并通过选用FCS-DBS系统作为实例验证了理论研究部分的可行性.     

一种基于内存撮合的计算机期货交易系统

针对磁盘数据库撮合期货交易系统效率低的缺点,提出了一种基于内存撮合的期货交易系统。介绍了该系统的组成和基本设计原理,重点讨论交易撮合子系统和网络通信子系统,并说明了它在实用中表现的优良性能。     

空管系统中内存数据库的设计与实现

空中交通管制(ATC)系统对数据高速同步的要求越来越高,而目前所使用的传统式集中数据库存取数据的速度已远远不能满足ATC系统的需求。为此,结合ATC系统的特殊需求,设计并实现了一种基于type-index-value的内存数据库,该数据库具有良好的可移植性,可有效提高系统性能以及对数据的存取能力。     

用于内存数据库的Hash索引的设计与实现

电信领域已成为数据密集型行业，需要高性能的数据库系统作为支撑系统，基于磁盘的数据库系统不能满足“实时”、“近实时”访问数据库的需求，将数据库核心数据驻留在内存中，可以使用内存数据库来满足需求。Hash索引是数据库系统中广泛使用的索引技术之一，它能够快速地访问数据，易于设计和实现。该文根据内存数据库的特点，为电信网管系统的内存数据库设计并实现了Hash索引。     

基于反馈控制的过程控制实时数据库系统设计

研究了当前先进过程控制系统的软件体系结构,针对复杂过程控制系统中的海量数据,设计了一种基于反馈控制的实时性能优良、硬件局限性小的全开放式实时数据库模型.在该控制系统的软件体系中,依据优化数据库缓冲区管理算法的原则,设计并应用了先进的内存页面置换算法,增强了实时数据库的实时性能,改善了海量数据对物理内存的瓶颈要求.基于该算法的FD RTDB数据库已在过程控制领域得到实际应用.     

基于CIM的内存实时数据库的设计

随着电力工业的发展,各个应用系统之间信息共享和应用集成需求凸现出来,迫切的需要不同系统间都遵循一个标准的、开放的电力系统信息模型,并提供通用的数据接口.CIM模型和CIS接口的出现,很好的解决了这一问题.同时由于电力行业需要存储大量的有较高时间约束的数据,将数据存储在内存中,并且定期的将内存中的数据转储到硬盘数据库中,可以有效的提高数据库事务执行效率.其中基于CIM模型的数据在内存中的组织方式是设计的重心.该内存实时数据库在电力监控系统中已经投入使用,并得到了预期的效果.     

内存数据库技术在移动实时累加系统中的应用

针对移动实时累加系统对海量数据的实时性处理要求,提出了适用于通信行业的内存数据库服务模型,详细阐述了MDB服务体系的设计与实现,使其可以屏蔽业务与存储介质的关联度;同时模型采用TTHA故障恢复机制,保证内存数据库能够从故障中完整地恢复及实现高可用性.经过对比测试表明,整个服务模型在实时处理海量数据时实现了高效的性能要求...     

面向DRAM和NVM异构混合内存架构的排序连接算法优化

随着计算机技术的高速发展,数据的应用规模也在不断扩大,各行各业对于数据存取速度的要求也越来越高.为了满足这种需求,内存数据库的思想被提出,然而传统的内存存储器DRAM由于密度和能耗的限制无法大规模集成和扩展.与此同时,非易失内存(NVM)以其性能高、密度高、能耗低的优势弥补了DRAM的不足.DRAM和NVM结合在一起组成的混合内存系统能够发挥出更高的性能和更强的扩展能力,同时也更加经济高效.在这种新的混合内存架构下,传统的算法面临着巨大的挑战,因为它们必须要对新的架构进行优化.故从数据库系统常用的排序连接算法出发,探索其在混合内存系统上的更优使用方式,提出了键值分离的排序连接算法,并在此基础上提出了3种不同的C-Join算法.实验结果表明,提出的方案达到了预期的目标,不仅减少了DRAM的使用,同时也提高了算法的时间性能.     

利用双向数据链表实现期货交易内存撮合

文章在分析期货交易系统数据来源及流向的基础上,提出了适合期货交易的内存数据结构,具体说明了如何通过双向链表对期货交易中的有关数据进行组织和管理,从而实现内存撮合,提高交易系统的响应速度。     

GPU数据库OLAP优化技术研究

GPU数据库近年来在学术界和工业界吸引了大量的关注. 尽管一些原型系统和商业系统(包括开源系统)开发了作为下一代的数据库系统, 但基于GPU的OLAP引擎性能是否真的超过CPU系统仍然存有疑问, 如果能够超越, 那什么样的负载/数据/查询处理模型更加适合, 则需要更深入的研究. 基于GPU的OLAP引擎有两个主要的技术路线: GPU内存处理模式和GPU加速模式. 前者将所有的数据集存储在GPU显存来充分利用GPU的计算性能和高带宽内存性能, 不足之处在于GPU容量有限的显存制约了数据集大小以及稀疏访问模式的数据存储降低GPU显存的存储效率. 后者只在GPU显存中存储部分数据集并通过GPU加速计算密集型负载来支持大数据集, 主要的挑战在于如何为GPU显存选择优化的数据分布和负载分布模型来最小化PCIe传输代价和最大化GPU计算效率. 致力于将两种技术路线集成到OLAP加速引擎中, 研究一个定制化的混合CPU-GPU平台上的OLAP框架OLAP Accelerator, 设计CPU内存计算、GPU内存计算和GPU加速3种OLAP计算模型, 实现GPU平台向量化查询处理技术, 优化显存利用率和查询性能, 探索GPU数据库的不同的技术路线和性能特征. 实验结果显示GPU内存向量化查询处理模型在性能和内存利用率两方面获得最佳性能, 与OmniSciDB和Hyper数据库相比性能达到3.1和4.2倍加速. 基于分区的GPU加速模式仅加速了连接负载来平衡CPU和GPU端的负载, 能够比GPU内存模式支持更大的数据集.     

浅谈Oracle数据库应用系统的性能优化

Oracle数据库应用系统除了能支持对多种业务形式的信息进行处理之外,还能够保证业务能够正常的进行。但是Oracle数据库在运用的时候还存在一些系统安全问题。本文通过浅析Oracle数据库及其特点,再结合数据库性能评价指标,从CPU利用和内存分配这两个方向入手,浅谈优化Oracle数据库应用系统的性能该如何做。最后提及三种Oracle数据库应用系统性能优化的相关技术：SQL语句优化技术、Oracle内存调整技术、Oracle表空间调整技术,以帮助优化Oracle数据库应用系统的性能。     

内存数据库在彩铃业务中的应用

传统的磁盘数据库由于I/O瓶颈的限制,愈来愈不能满足实时高性能应用的需求。内存数据库由于能够提供更快的响应速度和更大的事务吞吐量,在电信领域得到愈来愈多的应用。在对内存数据库技术进行研究的基础上,首次将内存数据库应用到彩铃业务中,提出一种改进的彩铃业务数据库结构。测试结果表明,引入内存数据库之后,彩铃应用的性能得到有效提高,并且CPU占用降低,系统能够承载更多的用户。     

一种基于内存的高效在线数据处理服务框架

在海量数据处理环境下,传统的基于中心数据库的架构已经无法满足大规模的数据处理应用中高并发高数据读写的需求,而串行的工作模式也使得数据分析的时效性得不到有效的保证,已经严重地影响了用户体验。该文从应用架构的角度出发,提出了一种基于内存的高效在线数据处理服务框架,通过多索引的高效数据存取方法和基于发布/订阅模式的数据访问控制机制,在有效减少用户对中心数据库的读写请求的同时提高了数据处理的时效性。实验结果表明该文提出的基于内存的高效在线数据处理服务框架能够有效提高数据库的响应速度,缩短数据处理延时。     

内存数据库的架构设计与应用

内存数据库是把外存全部或部分数据加载到内存中,在内存中维持数据的主拷贝。与传统的磁盘数据库相比,内存数据库中的所有事务,都是在内存中完成,它不与磁盘进行I/O交互。内存处理速度快,内存数据库适合于对信息及时性要求较高、信息并发量大的系统。基于此,笔者根据内存数据库的特性,设计出一个内存数据库架构并应用在项目中。     

SIP应用服务器内存数据库的设计

在SIP应用服务器中,由于大量用户及各种不同业务呼叫的存在,在用户检索、数据存储的速度及实时计费等方面对数据库的性能要求高,内存数据库的特性可以满足这种需求,本文介绍在SIP应用服务器中内存数据库的一种设计思路及实现方法,并对该内存数据库提供的接口进行说明;该内存数据库已经在实际的产品中使用,其可靠性及性能已经得到验证。     

用对象分片方法优化数据库设计

传统的数据库设计方法在超大规模数据库(VLDB)系统中存在不可克服的缺陷,通过引入对象分片方法,按照实际应用对其进行改造,将会克服缺陷,提高数据库的基本性能和处理海量数据的能力,提高主机资源CPU,内存和存储I/O的利用率,并能为系统扩容提供有效的支持.测试结果表明,该方法能够解决数据库性能随着应用功能的增加而迅速下降的问题,解决海量数据的存储问题,提高核心系统的资源利用率,为实际工程设计提供了数据依据.     

内存数据库技术在电网实时监测中的应用研究

对现有的内存数据库体系结构进行了改进,引进了数据失步缓冲机制和自适应文件缓冲机制,并将改进后的内存数据库技术整合到企业电网实时监测系统的整体架构中,提出了一套完整的基于内存数据库技术的企业电网实时监测系统的架构模型,该模型在保证数据实时性的同时可提高监测系统的并行处理能力和稳定性.与内存数据库相关的数据接口访问、数据同步等关键技术也进行了详细的分析,最后给出了系统的实际应用案例.     

ATC系统中高速内存缓存的设计与实现

由于空中交通管制系统在航空领域里的特殊应用,系统中部分数据实时性强,并且不需要长期存储,针对这一存储需求设计并实现了基于高速内存缓存的数据存储模型.模型基于key-value的内存池的内存管理方法,采用预申请和分组方式管理内存.通过实验分析比较了T数索引和哈希表索引的优点和适用范围,最终选择T树索引作为模型的索引数据结构.实验结果表明,该模型极大的提高了系统对该类数据的存取能力和系统性能.