共查询到18条相似文献,搜索用时 78 毫秒
1.
2.
根据分布式异构数据库间的数据同步的实际需要 ,在深入分析研究JMS技术的基础上 ,提出了一种基于JMS的分布式异构数据库间的数据同步的模型 ,并给出了关键技术的主要代码。 相似文献
3.
基于复制技术的高可用存储系统,在故障恢复时需要进行数据同步操作以保证数据副本之间的一致,缩减数据同步操作的时间可减少系统修复时间,从而提高存储系统可用性.数据同步过程的时间由数据同步所需传输的数据量决定.本文提出的基于日志操作合并优化的数据同步机制充分考虑到文件访问中的时间和空间局部性,通过对故障期间的所记录的日志进行合并优化,合并和去除不必要的日志项,使得需要同步的数据量最少,从而减少数据同步过程的时间.试验的结果表明,相对于其它几种通用的方式,基于日志合并优化的数据同步机制所传输的数据量最少,可有效的减少数据同步操作的时间. 相似文献
4.
本文从实际应用的角度出发,为数据库系统设计并实现了一种基于虚拟日志的高可用性的复制解决方案。采用一主多从模式(Single Master,Multi Slaves),使用异步分发技术,实行延迟远程存取和延迟传播技术对数据进行更新,提供跨平台支持。针对具有自主知识产权的国产大型数据库系统KingbaseES具体实现了该复制方案,从而提供了一个现实的、可扩展的复制系统框架。它能够提供稳定的数据复制,可用性高、准时复制、响应时间短,在及时同步业务数据、灾难备份恢复、改善决策支持系统等许多关键服务中有很高的应用前景。 相似文献
5.
6.
随着大数据时代的到来,数据之间的关系越来越复杂;人们需要一种强大的数据拓扑结构来提高数据的可用性;Goldengate是一种基于数据库日志的数据复制产品,可以利用极少的系统资源,实时复制数据,提高数据可用性。 相似文献
7.
同步技术是提高移动数据库系统性能的一项关键技术。依托完井移动平台,结合完井业务数据,提出一种基于操作日志的移动数据同步处理模型,重点分析了该模型中的日志序列的生成以及冲突的消解,并给出了具体的实现算法。该模型允许移动终端在断接状态下对本地副本数据进行操作,并通过移动事务日志记录用户行为,当重新连接时,根据服务器返回的日志序列进行同步处理,使系统最终收敛于一致性状态。同时还引入了日志合并、时间戳等方法,有效减少了移动终端的资源消耗,提高了同步效率。实验表明该算法能快速高效地完成客户端与服务器之间的数据更新与交互。 相似文献
8.
变化数据捕获方法是数据集成基础设施的战略组成部分,不断推动ETL、EAI等技术的发展.许多数据库厂商都提供了自己的CDC(Change data capture)产品,但只限于针对本身的数据库系统,价格也比较昂贵.虽然通过扫描数据库日志文件可以捕获变化数据,但大多数数据库系统都不提供日志文件的内部格式而只是提供日志访问的程序接口,如Oracle,SQL Server和DB2等.这些提供的接口有的访问活动日志,有的访问稳定日志,有的访问归档日志,因此很难保证读取日志文件的可靠性.现有的研究主要是如何利用程序应用接口读取日志文件,忽略了对可靠性的分析.本文针对读取不同类型的日志文件的可靠性条件进行了分析,提出了可靠读取规则及读取算法;并提出了从日志文件中有效抽取变化数据算法,实验证明了可靠性分析模型. 相似文献
9.
10.
XML在分布式数据同步中的应用研究 总被引:1,自引:1,他引:1
本文针对分布式数据同步时因为有异构的数据源而造成数据格式不统一,应用层进行同步的时候要进行相当复杂的转换并且维护起来也要耗费相当大的成本,提出了利用XML来统一异构数据潭的格式。从而为分布式数据同步提供统一的数据平台,大大降低了数据同步的工作量,提高了整个系统的性能。 相似文献
11.
陈茂边 《计算机工程与设计》2007,28(21):5311-5313
针对分布式数据同步时因为有异构的数据源而造成数据格式不统一,应用层进行同步的时候要进行相当复杂的转换并且维护起来也要耗费相当大的成本,提出了利用XML来统一异构数据源的格式,构建基于XML中间件的虚拟数据库.介绍此系统下的异构数据集成的思想和实现框架,同时详细介绍了该框架提供的服务功能及实现的关键技术. 相似文献
12.
13.
数据同步是实现数据共享的重要技术之一,本文首先阐述了基于快照的Oracle数据同步基本原理,然后讨论了数据同步的应用模式,最后介绍了实现基于快照数据同步的完整过程。 相似文献
14.
程林钢 《电脑编程技巧与维护》2014,(10):40-41,44
针对当前Web日志数据信息越来越多的问题,传统的数据库管理系统无法对其进行有效的操作分析。采用数据挖掘技术对其进行研究,从数据挖掘的系统结构和数据挖掘的过程两个方面对数据挖掘进行描述;对Web日志挖掘的理论和过程进行了详细的分析;给出ID3算法的描述,并给出了部分核心的代码。 相似文献
15.
历史数据实时压缩方法研究 总被引:6,自引:0,他引:6
在开发实时数据库中,对历史数据的存储和管理非常重要,由于大量的数据存储,需要高效的历史数据压缩算法。文章基于均方误差的设计思想,提出了一种新的历史数据压缩算法、给出其详细步骤,并和OSI软件公司开发的旋转门算法进行比较。仿真结果表明,该文提出的新压缩算法具有更高的数据压缩率,降低了测量误差对数据压缩影响。 相似文献
16.
17.
基于数据挖掘的虚拟仪器测量数据管理系统 总被引:2,自引:1,他引:2
介绍了数据挖掘应用于虚拟仪器的必要性,提出了基于数据挖掘的虚拟仪器测量数据管理系统,并详细阐述了方案的可行性、具体实现等问题。将PolyAnalyst应用于虚拟仪器测量数据管理系统,并给出实例及具体的挖掘结果。 相似文献