基于消息队列和XML的数据同步技术研究

数据同步技术一直是影响分布式计算机系统应用的一个决定性因素,在简单介绍了现有的数据同步技术的基础上,提出了采用Windows的消息队列和二进制XML编码技术相结合的数据库同步方案,给出了具有较高数据压缩比率的二进制XML编码算法,实现了在窄带网络环境下的数据同步,并对数据同步的导入导出策略进行了设计,仿真测试的结果表明该同步算法相较于传统的数据同步算法具有很好的网络传输特性及数据同步的可靠性,这些对于数据同步技术的研究,在理论与实践上都有一定的借鉴意义。     

二进制数据的XML集成方法研究与实现*

XML正逐渐成为WWW数据表示和交换的标准,如何有效实现将二进制数据与XML文档有效集成是充分利用XML所提供的优势的重要方面。给出了二进制数据与XML文档集成的框架,提出了一种有效的二进制数据编码算法和与XML文档的集成算法,用C++成功地实现了上述所有算法。     

XML数据扩展前序编码的更新方法

大部分XML查询技术都是基于某种对XML树的编码方法.对XML树的编码,是指按照某种规则对XML树的每一个结点分配唯一的编码,目的是通过任意两个结点的编码,能够直接判断两个结点之间是否具有祖先后代关系.最常用的编码方法是区域编码方法(region based numbering scheme).然而,XML数据也会面临插入删除等更新问题.数据一旦更新,区域编码也要作相应的调整,才能保证基于这个编码的各种索引和查询算法的正确性.在编码的更新方面,目前研究得还不多.主要研究区域编码的更新问题,采用预留编码空间的方法,针对不同特征的XML数据和应用环境提出了一整套预留算法和编码更新算法,并做了大量的实验,检验这些算法的有效性.     

XML数据动态更新方法研究

随着网络应用发展,网络交互可靠性及互操作性的迫切需求,XML语言的应用日趋广泛,而XML数据动态更新技术也受到越来越多的关注。介绍了XML语言及相关技术发展现状,包括XML数据模型、XML编码技术及基于动态编码实现XML数据更新技术;分析了传统方法的优点及缺陷;设计了TreeView数据模型。通过实例分析,验证了基于TreeView数据模型的动态更新方法的良好性能。     

基于SAX的XML数据结构聚簇存储方法

目前在存储XML数据时没有考虑数据之间的结构关系,但对其进行操作时往往需要涉及这些关系。该文在分析XML数据操作的特点后,提出基于SAX的编码解析算法,利用该算法遍历XML文档一次即可得到XML数据的三元组编码,以该编码为基础,提出2种XML数据的结构聚簇存储算法,通过实验对算法进行了分析和比较。     

一种基于扩展区间编码的结构连接算法TwigELM

由于XML具有格式良好,自描述,可扩展等优点,使得XML成为网络上信息表达和数据交换事实上的标准。随着XML格式数据的广泛应用,如何有效地存储和查询XML格式数据成为当前研究的热点。为了有效支持XML结构查询,研究者已经提出了XML数据的各种编码方案。通过编码的方式将XML结构查询的计算转化为结构连接的计算。该文提出了一种新的XML文档树编码方案,并基于该编码方案给出了一种新的小枝模式查询算法TwigELM,实验表明,该算法可有效提高结构连接操作的效率。     

一种XML数据流小枝模式查询算法

针对传统XML文档小枝模式查询算法系统开销大的问题,提出一种XML数据流小枝模式查询算法。该算法结合SAX数据流解析技术,将层次关系队列结构应用于XML文档查询中,采用动态生成区间编码的方式,免除建立编码索引文件的步骤。实验结果表明,在对相关数据集进行查询时,该算法可减少I/O操作,缩短查询响应时间,提高查询效率。     

一种高效的动态XML文档树编码机制

针对现有XML编码机制时空效率不高、对XML文档动态更新支持不够等问题,结合素数和IBSL 2种编码机制,提出一种新的XML文档树编码机制——基于素数的二进制字符串编码机制。理论分析和实验均证明该编码机制具有较好的查询效率,能够高效地支持XML文档更新操作,大幅降低空间成本。     

基于遗传算法的函数型小波网络

针对传统小波神经网络易陷入局部极小等缺陷,采用遗传算法对神经网络进行优化。提出了一种结合实数编码与二进制编码的多值编码遗传算法,上述算法在同一条染色体上同时使用实数编码与二进制编码,有机结合了两者的优点,并把遗传算法用于优化函数型小波网络的结构中,可获得具有更好泛化能力的小波网络。仿真实验结果表明,利用该遗传算法训练小波神经网络,能使网络具有简单的结构形式,较高的逼近精度和较强的泛化能力,并证实了网络的有效性和优越性能。     

基于区间编码的图结构XML数据上DAG匹配算法

图结构的XML数据被越来越多地应用在实践中,相关的问题也随之而生 .传统的XML树模型处理算法和图结构模型处理技术并不能够有效地处理图结构XML数据上的DAG查询 .提出了一种基于可达性区间编码的GraphJoin算法,利用区间桶这种数据结构,直接对图结构XML数据上的DAG查询进行全局匹配 .理论分析和实验结果表明,这种算法在查询时间和执行效率上好于现有的技术.     

分布式异构数据库数据同步工具

一般而言,读写分离技术可以解决当前大数据环境下的读写速度失配的部分问题,但是现有的读写分离技术主要是针对同构数据库的解决方案.由于存储结构的不一致,由行式存储数据库和列式存储数据库构成的异构分布式数据库系统相较于同构分布式数据库系统在数据同步的过程中就会面临格式转换、同步速度不匹配等诸多难题.提出了基于MySQL二进制日志（Binlog）进行SQL还原的方法TD-Reduction,设计并实现了Binlog解析器BinParser和Binlog还原器BinReducer,它们可以基于Mixed格式的Binlog,针对不同的事件（event）进行日志的解析,并依据相应的规则进行还原,生成可执行的SQL语句.综合以上技术,实现了一款分布式数据库数据同步工具Cynomys.在实验环境中,Cynomys表现出较好的性能.该方法适用于所有具有类似Binlog机制的其他异构数据库之间进行数据同步.     

基于观测器同步的超混沌系统加密算法研究

在混沌通信系统中,超混沌系统同步技术越来越受到重视。采用一种基于观测器的超混沌同步技术,实现对数据的加密。首先利用一维Logistic混沌系统产生混沌序列,通过与明文的结合产生出新的序列,在理想信道中进行传输,利用观测器同步最终在接收端恢复出这一序列,从而最终恢复出明文。通过仿真实验验证了该方法的有效性,此方法有很好的加密效果。     

.面向协同系统集成的数据同步模型*

为了在系统协同工作过程中使异构数据库的数据同步,基于agent技术给出了一个数据同步模型。在该模型中,agent的局部代理利用数据同步监听器对数据的变化进行实时监听,全局代理利用数据同步检测器对数据是否同步进行定期检测,并生成相应的同步命令由全局代理分发执行,解决了协同系统中异构数据库的数据同步问题。最后,该模型应用到一个"项目控制管理系统"中,说明了该模型的可用性和有效性以及数据同步机制的正确性和实时性。     

基于数据复制技术实现移动数据同步

在移动计算环境中,数据同步使人们能够使用各种各样的无线或者移动设备处理和存储各种数据。介绍了一个使用通用同步协议SyncML、基于数据复制技术实现移动数据同步的系统的设计和实现方法。     

移动数据库同步技术在征稽系统中的应用

在移动计算环境中,人们通过数据同步机制利用无线或者移动设备处理和存储各种数据。本文研究了SQLServe复制技术和基于XML的数据同步方式,并将两种同步复制方式进行了深入分析比较,研究出一种将两种方式结合同步方案,并应用于实际系统。     

基于Spline插值的分布式多速率数据帧扫描同步重构技术

提出一种基于Spline样条插值的同步重构技术,实现分布式多速率数据帧的扫描同步.该技术在分布式测控网络系统中出现多种不同采集速率和/或不同起始时刻的测量情况时,能有效地把这些测量数据转换为相同帧速率的数据,从而实现采集数据的同步.最后通过两个数值仿真实例验证了Spline插值的同步重构技术有效性和准确性.     

基于集群节点间即时拷贝的会话同步技术研究

集群会话同步技术目前主要有如下几种：基于Cookie的会话同步,基于数据库的会话同步,基于分布式缓存的会话同步.在以上会话同步技术的基础上,提出了一种基于集群节点间即时拷贝的会话同步技术,将会话标识信息存放在客户端中,避免了在客户端中存放完整的会话信息,从而可防止用户身份信息暴露的安全隐患;同时,在客户端向服务器发送请求的过程中,只携带会话标识信息,而不是完整的会话信息,传输的数据量将大大减少,提高了客户端对服务器的访问效率;各集群节点间同步会话信息,不需要从数据库中获取会话信息,避免了频繁使用数据库带来的性能瓶颈;也不需要使用专门的会话缓存服务器,减低了开发和部署成本,并具有良好的应用前景.     

移动数据库同步技术在征稽系统中的应用

在移动计算环境中,人们通过数据同步机制利用无线或者移动设备处理和存储各种数据。本文研究了SQL Serve复制技术和基于XML的数据同步方式,并将两种同步复制方式进行了深入分析比较,研究出一种将两种方式结合同步方案,并应用于实际系统。     

基于门面模式的分布式数据库同步技术

数据同步作为维护分布式环境中各个节点数据库数据一致性的方法,是分布式环境中的一项关键技术。本文针对Oracle多数据库的应用环境,提出一种类似于"门面模式"的适合企业级数据库同步技术。从数据库链路、同义词、事务同步提交等3个环节,阐述分布式数据库的事务同步的基本工作原理。在实际研发的项目中,表明了基于门面模式的分布式数据库事务应用的可行性与良好的功能特性。