关系型数据库内存化存储模型研究

大数据环境下,磁盘数据库存在高并发I/O瓶颈,磁盘数据内存化是解决传统关系型磁盘数据库I/O瓶颈的有效方案。已有的内存化技术存在数据丢失、配置复杂等问题。基于内存数据库Redis,以典型开源关系型数据库MySQL为例,提出一种解决关系型数据库磁盘I/O瓶颈的轻量级内存化解决方案,实现MySQL的内存化存储。同时构建行式键值（RB-KVM）和分段列式键值交叉（PCB-KVCM）存储转换模型,实现异构数据库存储模型的转换和自动化数据迁移。通过分析对比,RB-KVM数据存取效率更高,而PCB-KVCM具有更高的内存利用率且在时间开销上优于RB-KVM。通过实际运行分析,该技术不仅提高了数据库在高并发场景下的吞吐能力,实现了海量热点数据的高效存取,在实际应用中也更加快捷,实施成本更低。     

一种支持并行存取的数据分布策略

本文基于关系的水平划分提出了一种支持并行存取的数据分布策略:多步循环均匀分布法(CEDM法)。该法通过循环散布方式保证了数据片段在各磁盘上的物理均匀分布;又通过按查询率多步分布和将片段标号差大的片段存放于同一磁盘的方法,使查询相关性强的片段均匀分布于各磁盘中,从而得到较佳逻辑均匀分布特性。CEDM法可以有效地支持多机多通道信息处理系统对数据库的并行均衡存取,从而提高系统效率。     

一种面向实时数据库存储引擎的设计与实现

卫星地面设备监控中,需研究实时数据库技术来管理大量的分布式环境下的实时数据.为此文章设计了一种实时数据存储引擎.该引擎借助内存文件映射机制实现内存表,以LRU算法和页面缓冲池实现了磁盘表,通过位图方法管理数据库表的文件空间,以影子页面法实现了事务的提交与回滚,并设计了数据库表的逻辑结构.通过使内存表和磁盘表结构保持一致,确保了数据库运行时内存表和磁盘表的灵活转换,影子页面法确保了数据库具有实时的故障恢复速度.结果表明,该引擎适用于存储卫星地面设备监控中的大量实时数据.     

基于网络的档案管理信息系统的设计与研究

通过对基于网络的档案管理信息系统的设计开发,分析了数据库概念模型设计、逻辑结构设计、物理结构设计及数据库概念模型向关系模型的转换,给出了E-R方法进行系统设计的方法.对数据库的规范化进行了深入分析,结合具体的开发需求与开发环境,对数据模型进行了优化和调整,对数据信息繁多而复杂的档案管理信息系统,给出了具体的解决方案和技术措施.     

PostgreSQL数据库预取算法研究

减少磁盘的存取时间是提高数据库性能的关键.本文讨论了PostgreSQL数据库顺序存取的特性,提出了一种PostgreSQL中顺序预取数据块的算法,预取的数据块数目可根据当前存取块之前的顺序存取情况作自适应调整.实验结果表明,该算法能有效地提高磁盘块的平均存取速度.     

组态软件中的历史数据处理过程

实时数据库中历史数据是系统定时从实时数据库中采样,保存到历史数据库中的数据,用户需要时可随时从历史数据库中访问历史数据。历史数据库包含内存历史数据库和磁盘历史数据库。内存历史数据库关注的是测点近期数据的组织方式;磁盘历史数据库管理的对象是历史数据文件和管理信息文件。本文描述了磁盘历史数据库的文件结构、缓冲区进行了描述,并阐述了磁盘历史数据库的实现技术。     

基于Web的实时监控系统信息访问的研究和开发

在工业及自动化领域,采用Internet/Intranet技术,将Web与数据库技术和现场监控系统结合使用将为实时监控系统带来新的变革.在此背景下,本文提出基于Web的实时监控系统信息访问模型,并针对这一模型结合实时系统特点提出了一种新的解决方案,实现了485串口通信、数据的存取访问和远程命令控制.     

一个实时数据模型

本文提出了一种实时数据库的数据模型,给出了三种基本实时数据对象和基于实时数据对象的实时数据库的定义,然后着重讨论了实时数据对象的时间关系代数操作和实时数据库的定时限制。     

基于对象代理的隐私数据模型研究

由于隐私保护已经越来越受到人们的关注,许多与隐私保护相关的技术已经得到不断的研究.Agrawal等人提出了Hippocratic数据库概念,将隐私保护机制集成到关系数据库系统中.虽然关系数据模型简单成熟,但却难以表示现实世界中隐私数据之间复杂的语义关联.面向对象数据模型虽然能表示更复杂的语义关联,但不够柔软,难于灵活地根据实际要求进行变化.提出了基于对象代理机制的隐私数据模型.对象代理机制在保留面向对象数据模型表达能力的同时,提高了面向对象数据模型的灵活性.该隐私数据模型能更好地支持隐私数据库中的数据存储要求,维护隐私数据之间的一致性.同时,该模型还能满足隐私数据的使用要求(如多态性、可扩充性等),并能在数据挖掘的过程中保护隐私.     

嵌入式内存数据库引擎的研究与设计

磁盘数据的存取和传输到内存的速度一直是计算机系统的性能瓶颈.虽然现在磁盘转速和总线速度已经有了很大提高,但磁盘容量的大幅度增大又减缓了对其上数据的存取速度.本文介绍了嵌入式内存数据库技术发展的现状、定义、特点及面向3G平台嵌入式内存数据库引擎的具体设计方法实现.     

冷冲模CAD对象数据模型的研究

本文提出的对象数据模型是将语义数据模型与面向对象概念相结合而形成，具肋交强的语义功能，并使得数据库具有较好的开放性和可扩充性，应用这种数据模型设计的数据库能够较好地支持冷冲模ＣＡＤ系统工作，文章描述了对象数据模型的组成结构，语义关联和基本运算功能。     

一种基于域数据模型的访问控制方法研究

根据企业中数据的特点,提出了一种新的数据模型--域数据模型.这种数据模型可以很好地支持企业中数据的访问控制,利用这一点,结合RBAC模型,建立了一种基于域数据模型的访问控制模型RBACInDDM.它是RBAC建议标准模型在域数据.模型中的扩展,利用它可以方便地实现访问控制,并支持对企业数据进行细粒度的访问控制.     

数据模型的智能化扩充研究──面向对象的知识数据库模型

数据模型的智能化扩充旨在从数据模型着手，提高数据库系统的性能与功能，使其可存贮和处理复杂对象和知识，增强结构和行为的建模能力、语义构造能力，能演绎推理．本文承接此思路，基于面向对象方法，吸收语义数据模型和人工智能中的演绎推理机制，提出一个面向对象的知识数据库模型．讨论其基本概念与性质、查询语言、与传统模型的比较和实验系统ＯＣＥＡＮＳ的体系结构及实现方案．     

工艺规划数据模型的构造

本文阐明计算机辅助工艺规划中一种新的数据模型，构造和表达一般性工艺规划进程，工艺规划数据模型包括产品模型和方法模型两个部分。产品模型表达产品在机械加工过程中各个状态；方法模型描述对产品进行加工的工艺方法和操作顺序。     

基于路网相似性的路段行程时间估计

虽然浮动车GPS数据量很大,但是在某些时段,仍然有一些路段缺少实时浮动车数据,从而难以对行程时间进行估计。针对实时浮动车实时数据在估计路段行程时间时存在数据缺失的问题,本文提出了利用路网间属性和空间结构的相似性,从浮动车历史大数据中提取相似路段之间的时空关联特征,以目标路段与相似路段间的时空关联关系为输入,目标路段行程时间为输出,利用构建的三层神经网络模型进行数据缺失路段的行程时间估计。实验结果表明,路段行程时间估计值的平均绝对百分比误差可达到30%,与Naive Model相比具有较好的估计精度,验证了从路网相似角度解决实时数据缺失的可行性。     

基于有序树模型的故障检测

针对分布区域广、结构复杂的系统,提出了有序树模型来实时、有效地实现故障检测。通过分析复杂结构系统的布局特性,构建了有序树模型,实现了对检测数据关联性的有效表示;利用有序树结点间的关联性和传感器的测量值,估算出相应结点的数据计 算值;根据相应结点测量值与估计值的关系,推算出管道运行工况,实现对复杂系统故障的检测。通过仿真验证了该方法故障检测的有效性,为系统的维护提供了理论依据。     

面向区域可持续发展的数据模型研究

区域可持续发展是可持续发展在时间、空间和构成要素上的具体化。区域可持续发展的研究面临多种信息数据源和多种数据类型。与传统的面向计算机的数据模型研究不同,面向区域可持续发展的数据模型应该是面向应用的,数据模型对客观世界的表达也应符合人们对地理事物的认知习惯。据此,该文在区域可持续发展的理论和数据模型研究现状的基础上,设计了区域可持续发展的模型及其抽象数据类型。     

数据仓库方法论

数据仓库是面向主题的、集成的、非易失的且随时间变化的数据集合，本文简要讨论有关数据仓库的主要设计技术与管理技术，包括数据模型，元数据，粒度，数据分割，数据集成以及分布式数据仓库等。     

基于海量运行数据挖掘的电网拓扑关系分析及应用

针对电网中GIS系统与用电信息采集等系统中停电数据不一致问题,本文利用大数据分析技术对停电运行数据与拓扑关系的规律进行数据挖掘,构建变压器停电信息与GIS等系统的拓扑优化关系模型.从GIS系统、用电信息采集系统抽取数据,以GIS系统中线路-变压器关系表为基准,以变压器停电信息为校验数据,通过变压器停电与GIS拓扑关系的...