一种基于Key-Value数据库的快速地名地址输入提示方法

现有地址输入提示方法涉及标准地址和POI的研究较少,地址字符串的索引,大多采用Trie（字典）树索引,Trie树建立时内存消耗巨大,面临海量数据,问题突出。针对以上问题,提出一种基于Key-Value数据库的快速地名地址输入提示方法,该方法基于Trie树结构进行改进,降低了地址索引的复杂度;基于Key-Value数据库构建Trie树,避免了内存消耗巨大的问题。实验结果表明,基于Key-Value数据库构建的Trie树索引较基于内存构建的Trie树索引在事务响应性能方面和内存消耗方面具有明显的优势和效率。     

基于SSD的Key-Value系统优化设计与实现

随着互联网技术的迅猛发展,越来越多的非结构化数据涌入到人们的生活中,为这些数据建立高效的索引面临极大的挑战.键值数据库Key-Value以其结构简单和高扩展性而引起人们的广泛关注,已成为海量数据存储系统中的重要组成部分.由于Key-Value系统对吞吐量要求较高,而基于Flash的固态硬盘(solid state drive,SSD)能够提供很高的随机读性能,在SSD上构建Key-Value系统已成为海量数据存储领域的一大研究热点.鉴于Flash具有非定点更新、寿命有限等特性,基于SSD的KeyValue系统必须针对Flash的特性作专门优化.以一种称为SkimpyStash的基于SSD的Key-Value系统为基础,提出了一种新的Key-Value系统低延迟存储系统(low latency store,LLStore).LLStore使用内存文件映射技术来减少针对SSD的IO请求,除此之外,针对SkimpyStash中低效的压缩策略,提出一种改进方法,可以在少量增加内存开销的情况下极大地减少查询时间.通过与原系统的性能比较实验,LLStore在平均查询时间上可以获得至少12%的加速.     

Redis在即时通讯系统中的应用

传统的即时通讯系统的弊端之一是数据库I/O次数频繁,因为在IM中大量短而多的消息持续在磁盘的数据库上进行读写。为了解决数据库造成的系统瓶颈,选取Mysql和内存Key-Value引擎的No SQL数据库Redis两级存储,从而给出基于XMPP的即时通讯系统高可用的优化方案。     

浅谈地籍管理数据库技术与设计

本文主要介绍了地籍管理数据库的建立和管理过程,城乡一体化的地籍管理数据库发展中遇到的几点问题,又研究了地籍时空数据库的特点,并分析了地籍管理数据库的新技术和未来发展趋势。     

基于Linux内核的Key-Value存储系统——KStore

Key-Value存储系统在各种互联网服务中被广泛使用,但现有的Key-Value存储系统通常在用户态空间设计和实现,因为频繁的模式切换和上下文切换,导致访问接口、事务处理效率不高,在高并发、低延迟的数据存储需求中尤为突出.针对该问题,给出了一个内核态Key-Value存储系统的实现--KStore:提供内核空间的索引和内存分配机制,并在此基础上,通过基于内核Socket的远程接口以及基于文件系统的本地接口,保证了KStore的低延迟;同时,通过基于内核多线程的并发处理机制,保证了KStore的并发性.实验结果表明,与Memcached相比,KStore在实时性和并发性方面都取得显著优势.     

青云QingCloud正式推出Redis缓存集群服务

正北京2014年12月19日电/--国内领先的基础云服务商青云Qing Cloud日前宣布,基于Redis的缓存集群服务现已正式推出。Qing Cloud此次推出的Redis高性能缓存集群包含多个缓存节点,支持一主一从和一主多从的架构,并提供可持久化和自动备份服务,确保用户数据的快速读写和高可用性。Redis是一款基于内存的Key-Value数据库。与传统数据库相比,Redis的优势在于它将数据存储在内存中,读写性能得以巨大提升,适合那些频繁读写、并对速度要求较高的业务场景。鉴     

数据维护的几点经验和技巧

结合实践经验总结了对数据库进行数据维护的几点经验和技巧,并对数据库的设计问题进行了相关的探讨。     

多中心临床数据的快速检索系统

临床数据共享平台是我国医疗信息化发展的重要方向,在当今医疗数据呈几何级增长的环境下,多中心海量的临床数据如何管理、共享、并有效地查询和检索是一项重要的课题.该系统使用HL7 CDA XML作为描述电子病历的标准,采用关系型-XML混合数据库提供索引和XQuery查询工具.同时为了提高查询效率和并发性能,使用了BerkeleyDB作为Key-Value存储的数据层,并架设了Memcached作为查询数据的缓存层,增强了整体系统的可用性,最终形成了一个标准、通用、高效的临床数据共享平台.     

旋转机械在线状态监测系统数据库开发与设计

介绍了一个在线监测系统的ORACLE数据库开发，给出了数据库的概念设计和逻辑设计的过程和实现，概述了数据库物理设计的原则和几点实践中体会，概述了sql语言以及在结合本系统编写sql脚本过程中需注意的要点。本数据库完全符合工厂实际需求，且实际运行效果良好。     

海量气象数据实时解析与存储系统的设计与实现

气象数据是一种典型的非结构化数据,在实际应用中其日增量达数十TB,基于关系数据库和传统文件系统的解析、存储与访问模式已成为制约天气预报系统信息化发展的瓶颈之一。为满足全国天气预报平台MICAPS用户对实时数据的及时、快速查询,介绍了能够7*24小时稳定工作、支撑数十TB/天的数据实时解析系统。根据气象数据的多维模型和用户行为,采用非关系型分布式Key-Value数据库,设计实现了高性能海量数据存储系统。实践证明,数据实时解析系统和基于分布式非关系型KeyValue数据库的存储系统能有效满足海量实时气象数据存储、查询和应用需求。该系统已成为中国天气预报业务流程中的核心系统,体现了优异的功能和性能。     

关系型数据库内存化存储模型研究

大数据环境下,磁盘数据库存在高并发I/O瓶颈,磁盘数据内存化是解决传统关系型磁盘数据库I/O瓶颈的有效方案。已有的内存化技术存在数据丢失、配置复杂等问题。基于内存数据库Redis,以典型开源关系型数据库MySQL为例,提出一种解决关系型数据库磁盘I/O瓶颈的轻量级内存化解决方案,实现MySQL的内存化存储。同时构建行式键值（RB-KVM）和分段列式键值交叉（PCB-KVCM）存储转换模型,实现异构数据库存储模型的转换和自动化数据迁移。通过分析对比,RB-KVM数据存取效率更高,而PCB-KVCM具有更高的内存利用率且在时间开销上优于RB-KVM。通过实际运行分析,该技术不仅提高了数据库在高并发场景下的吞吐能力,实现了海量热点数据的高效存取,在实际应用中也更加快捷,实施成本更低。     

基于NOR Flash实现KV数据库的应用研究

为在水文自动测报系统遥测站的遥测终端机中基于NOR Flash存储器可靠地存放系统运行参数,分析遥测终端机中常用固态存储器的读写特点和KV键值数据库的实现方式,设计一种基于W25Q256存储器实现KV键值数据库的解决方案.方案充分应用NOR Flash存储器的读写特点,针对同一个地址重复写入的最小编程颗粒度为1 bit,结合KV键值实现一个键值对状态的顺序变化,进而通过在存储器的一段空间内顺序增加地址存放KV键值对,实现KV键值对的新增、修改、删除和检索操作,达到磨损均衡和异常掉电恢复效果.在嵌入式系统中,相较于常用的采用固定地址保存运行参数的方案,该研究方案能有效延长NOR Flash存储器的使用寿命,提高系统的稳定可靠性.     

系统安全风险评估数据库

描述了风险评估数据库的整体设计方案。对风险评估数据库的应用背景作了概要的介绍，结合数据的获取方式分析了数据库中用于风险评估的数据源的内容，分析了数据库的结构，给出了数据库表之间的关系，并介绍了系统中数据库管理工具的设计思想。     

多媒体数据库引擎及其体系结构研究

多媒体数据库引擎将媒体内容处理方法与媒体数据检索方法整和为一体,以引擎的方式与关系数据库管理系统或多媒体应用系统集成起来,从而简化多媒体应用开发的复杂度。该文介绍了多媒体数据库引擎的体系结构、与关系数据库管理系统无缝结合的方法以及多媒体数据库引擎中的DataTool模块。     

ERCM与数据库设计

本文介绍了一种实用的数据库设计方法，它以实体分析法为理论基础，通过对我们日常使用的表进行聚集和归类，完成数据库的逻辑设计，所设计的数据库满足ＢＮＯＦ范式。同时该方法可操作性较强，本文还介绍了自行设计的ＥＲＣＭ数据库辅助设计工具。     

实用主存数据库实现及其在短消息中心的应用

介绍了主存数据库的基本概念和其与传统数据库的差异,以及探讨了关系型主存数据库的设计思想与实现方法,并介绍已成功应用于短消息中心的一个关系型主存数据库原型系统ExceedSQL。     

异构数据库中的数据类型转换

简要介绍了异构数据库系统的基本概念以及对异构数据库数据类型转换的需求分析;重点介绍了异构数据库数据类型转换所面临的主要技术问题及解决方案;并介绍了XML在异构数据库系统中的应用;最后,简要介绍了异构数据库系统的应用领域及展望。     

面向对象数据库的存储管理技术

该文从一个基于关系数据库的面向对象科研信息数据库管理系统-KYOODB的设计出发,首先介绍了系统的软件结构;接着探讨了系统的对象模型和标识设计;最后较详细地介绍了KYOODB系统的存储结构。