基于CIMISS的省级气象大数据服务系统设计

针对原有省级CIM ISS系统无法有效支撑现代化气象数据服务的问题,利用分布式技术,构建了天津省级气象大数据服务中心,搭建了以HBase、GBase、分布式NAS为基础的统一数据存储环境,与省级CIM ISS系统形成了无缝对接,满足了天津气象业务的现代化需求.在测试对比中发现,本系统的查询性能得到较大提升:自动站数据比CIM ISS系统提升了5.2-22.3倍(倍数随着时间不断扩大),而格点数据则比原一体化平台提升了5倍多,充分验证了本方案的有效性.     

分布式云数据库复合Trigger新机制

为灵活高效地解决在不同的场景下,更新云数据库系统中缓存的全局共享数据表的问题,本文提出了一种在云服务端分布式数据库使用的复合触发器新型的软件架构,并基于数据库触发器技术,引入了直接、间接和复合Trigger的3种机制,这3种Trigger机制的引用,使来自业务支撑模块的数据变化,或是实时业务模块的数据变化,其前端的应用程序都可以及时高效的更新缓存。该研究提高了系统的灵活性,稳定性和鲁棒性。特别复合Trigger机制,可以避免大量的跨网络数据交互发生,提高了应用的服务质量。     

一种大规模数据快速并行导入工具的研究与实现

随着大规模数据的快速增长及高可靠性需求,将本地数据迁移到分布式数据库势在必行。针对这种情况,提出一种基于MapReduce的"快速并行导入"技术,充分利用集群的并行计算能力,直接向HBase底层存储文件HFile写入数据,既可避免上层数据导入时间的浪费,又节省资源开销。有效解决了从单机数据库向HBase分布式数据库导入数据功能低下、效率不高等问题。实验结果表明,在"快速并行导入"技术的基础上设计并实现的快速并行导入工具,支持多列族文本数据的快速导入。与传统使用API导入数据相比,速度提升一倍以上。     

海量船舶自动识别系统中数据检索系统的设计与实现

针对船舶自动识别系统( AIS)数据的发送周期快,中国沿海的船舶数量多的问题,利用键值对技术和分布式数据库构建海量船舶自动识别系统。通过船舶的移动通信业务标识码( MMSI)和船舶的AIS信息组成键值对,实现单船长期轨迹的存储和快速检索利用四叉树数据结构实现了区域数据的快速检索,实验结果表明本文构建的系统实现了海量AIS数据的存储并且对长期船舶数据查询速度提高6倍以上。     

在多元连接数据查询中最小生成树法的改进应用

本文对最小生成树法在分布式数据库多元连接中的应用进行了阐述和分析,并利用分布式数据库数据的分布性对最小生成树法进行了改进。提出了基于最小生成树法的连接图划分方法将连接图划分成多个子连接图,提高连接操作的并行性,从而使得响应时间得到减少。     

关于分布式数据库的几点思考

分布式数据库系统在很大程度上满足了人们对解决数据存储地域分散性问题的要求,具有很好的便利性与实用性,本文就分布式数据库的概念与特点及其发展的优劣势进行了阐述.     

分布式数据库复制问题的一种解决方案及应用

分布式数据库系统中的复制机制有许多优点,但同时也带来一些问题,解决这些问题的方法有很多。针对这些问题,从需求分析、数据分片和分布、异步复制、数据更新、复制模式、数据冲突、查询处理等多方面因素进行考虑,根据实际情况,选择或改进其中的方法,从而形成一种新的解决分布式数据库复制问题的方案,并将其应用到一个实际的出版物发行信息系统之中,较为完善地解决复制问题。     

基于直接连接的分布式数据库查询优化实现方法研究

首先对分布式数据库查询执行代价模型进行分析,然后对直接连接中的连接运算的方法、连接关系的传输方法和执行场地等问题进行研究,并计算所有评估方法的执行代价,从中选择出最小执行代价的执行方法,最终确定了执行的场地、连接的方法和传输方法.     

基于SDD-1算法的分布式数据库查询优化策略的研究

分布式数据库系统由于数据的分布和冗余使得分布式查询处理增加了许多新的内容和复杂性,因此分布式查询处理的策略显得尤为重要.本文介绍了基于SDD-1算法的查询策略的特点,并提出存在的问题及改进方法.