基于WEB服务的分布式异构数据同步设计

分析分布式数据同步的方式,解决基于互联网WEB端口的异构数据同步问题,结合SOA架构的特征提出一种分布式异构数据同步模型WLDSS（Web-levelDataSynchronizationSystem）,给出了该模型的设计原理、关键策略,通过分布式太阳能热水系统的控制系统数据同步的应用验证了WLDSS模型稳定性。     

基于Web Service的异构数据库同步系统设计与实现

针对在分布式网络环境下异构数据库之间数据同步中存在的问题,提出了一种基于WebService技术的异构数据库数据同步系统的解决方案和实现方法。通过在各数据库应用系统中放置基于WebService技术的数据同步客户端程序以及在服务器端部署WebService服务程序实现数据的同步,不但有效地解决了在异构数据库之间数据同步时存在的问题,而且对各需要同步的应用系统的正常业务处理几乎没有影响,对应用系统的改动工作量也很小。最后,把该方案应用到了一个实际项目中。     

基于共享缓冲区的数据流处理框架设计与实现

为解决数据流处理应用程序依赖数据流传输,分布式环境部署困难,应用开发难度大等问题,设计了一种基于共享缓冲区的数据流处理框架。该框架利用共享缓冲区为应用提供数据代理接口,实现数据流推动和分布式处理,并引入可自定义的负载均衡,解决了应用对数据流的依赖度和开发部署的难度系数,使其专注数据分析处理,无需关心数据的地理位置,提高了应用系统的稳定性和扩展性。通过在互联网病毒监控系统中应用,验证了该框架在分布式环境下的实时性和灵活性,使其可移植到云计算环境中。     

基于ArcObjects开发的多编辑源分布式地图同步方法研究

针对分布式GIS应用系统中存在的多编辑源数据同步问题,在结合文件系统和地理数据库数据管理模型的基础上,探讨了利用ArcObjects组件独立开发GIS应用系统,解决多编辑源分布式GIS地图同步问题.对ArcObjects组件、ArcSDE以及相关技术进行阐述,详细说明了多编辑源地图同步问题的解决方法,最后给出该方法在某灌区分布式GIS应用系统中的应用实例.     

普通交换机在IEEE1588时钟同步系统中的应用

探讨了在通信网络结构相对简单的分布式测控系统中,采用普通以太网交换机实现IEEE1588时钟同步应用方案。通过大量的实验数据来分析IEEE1588系统中使用普通交换机所导致的同步报文延迟对于时钟同步精度的影响,以及使用不同性能交换机的IEEE1588系统所能够实现的时钟同步效果。研究结果表明,在主从时钟节点通过交换机直接连接以及网络流量很小的情况下,仍可以实现微秒级的时钟同步精度,由此验证了普通交换机的可行性。本文的工作可以为IEEE1588协议在分布式测控系统中的进一步推广普及提供参考依据。     

分布式数据库数据同步技术及其在气象行业中的应用

本文采用.NET Remoting分布式远程对象处理方法,建立了一种在分布式数据库系统上能够使用的数据同步模型,并将该模型成功应用于自动气象站数据管理系统中,解决了网络环境中分布式数据库的数据同步传输问题。经过一年来的业务应用表明,采用.NET Remoting技术可以简化分布式远程处理的开发过程,是一种可取的分布式数据同步应用解决方案。     

Windows Azure模拟环境下云计算数据同步功能的实现

通过下载安装Windows Azure SDK软件包,部署模拟Windows Azure的云计算环境的模拟器,利用Visual Studio 2010开发工具,设计出基于.net Framework框架的,具有云计算数据同步功能的系统。该系统的客户端同步工具软件实现同步选择、迁移同步等基本功能。在线管理程序对Web在线管理功能进行验证。最后对系统的同步效果进行测试,达到设计要求。     

空管自动化系统中一种多副本数据同步的设计与实现

本文介绍了空管自动化系统开发中一种用于多副本数据同步的设计与实现。通过基于中心节点和消息中间件的使用,实现了分布式情况下多副本数据的记录同步。该中间件运行效率高,已在实际开发应用中取得满意效果。     

应用WCF分布式框架实现移动数据同步

远程数据访问及合并复制同步方式存在数据安全性及不适合复杂网络环境的问题,而同步服务通过组件重构的方式实现数据同步,因此可以方便地将服务端同步组件和客户端同步组件分别部署。通过使用WCF封装服务端同步组件,可以使得服务端同步组件单独作为应用程序服务层为所有的客户端提供同步服务,从而解决了数据安全及复杂网络环境问题。可以自定义服务端同步适配器实现服务端和客户端之间的增量数据同步,利用同步服务冲突管理机制,又可以采用服务端优先或客户端优先方式解决数据冲突,从而给出一个完善的基于分布式框架的移动数据同步解决方案。     

基于SQL还原法的异构数据库同步技术的研究与实现

数据同步作为维护分布式环境中各个节点数据库数据一致性的方法,是分布式环境中的一项关键技术。文章针对PEGAP网络隔离的应用环境,提出了一种"基于SQL还原法"的适合于企业级数据同步的技术。从数据同步的变化捕获、数据分发和数据更新等三个环节,阐述了PEGAP网络隔离环境下异构数据库同步的基本工作原理,给出了同步系统的总体框架结构,并按照总体框架及流程研究了每个模块的实现细节。最后用水费系统实例来验证该方法,它的成功应用表明了"基于SQL还原法"的可行性及其良好的功能特性。     

基于同步引擎的分布式文件缓存系统设计

针对集中式数据管理的网络带宽和运行效率问题,提出了基于同步引擎的分布式文件缓存系统。考虑到分布式部署以及有效同步数据中心和众多分支机构之间频繁更新的文件等因素,系统将文件同步功能拆分到同步引擎、文件传输服务和同步控制台三个关键组件上。两年的实际运行表明,系统能够实现提供可靠和有效的文件同步服务。     

利用InterConnect技术实现同步复制的应用与研究

针对财政系统数据同步的要求,给出了基于轴辐架构同步方案的部署方案、技术要点和实施步骤.通过代码分析进一步剖析了该方案的实现机制和原理.最后,通过测试、比较和分析,得出了该方案在数据同步完成时间、数据传输可靠性、系统扩展性等方面的明显优势.     

基于Oracle物化视图日志的数据同步技术研究

在当今数据信息系统的开发中,分布式数据库和分布式应用系统间的数据同步问题是一个较为常见且较难解决的问题。现有的各种解决方案存在反映源数据频繁变化比较困难和数据同步效率低等问题。本文通过对Oracle数据库的物化视图日志机制的研究,简要介绍Oracle数据库物化视图日志的数据结构、对数据库记录操作的记录方式,提出了一种基于Oracle数据库物化视图日志的数据库同步技术,为分布式应用系统中数据表间的数据同步提供了一种新思路。     

分布式远程教育资源网的设计及通信机制

远程教育是互联网中的重要应用,分布式的资源组织模式与大范围的教育受众覆盖是部署实施的关键。该文通过分布式资源网以实现资源共享,给出资源发布的通信过程和方法,研究了提高资源同步效率的端系统组播机制,设计了兼容IPv4和IPv6的 IPDVB传输系统,用来满足向卫星接收终端用户递送资源的需求。     

多数据中心的差异同步法及其应用

针对多数据中心中数据同步领域存在的不足,在对多数据中心的数据同步技术进行研究的基础上,重点研究了差异数据同步过程及其应用,在应用中可使多个数据中心的数据实现高效、实时地同步,为解决分布式信息系统的数据同步问题提供一种新方法。     

事件驱动的微服务调用链路数据动态采集方法

微服务调用链路数据是微服务应用系统日常运行中产生的一类重要数据,它以链路形式记录了微服务应用中一次用户请求对应的一系列服务调用信息。由于系统的分布性,微服务调用链路数据产生在不同的微服务部署节点,当前对这些分布数据的采集一般采用全量采集和采样采集两种方法。全量采集会产生较大数据传输和数据存储等成本,而采样采集则可能会漏掉关键的链路数据。因此,提出一种基于事件驱动和流水线采样的微服务调用链路数据动态采集方法,并基于开源软件Zipkin设计实现了一个微服务调用链路数据动态采集系统。该系统首先对不同节点符合预定义事件特征的链路数据进行流水线采样,即数据采集服务端只在某节点产生事件定义的数据时对所有节点采集同一链路数据;同时,针对不同节点的数据产生速率不一致问题,采用基于时间窗口的多线程流式数据处理和数据同步技术实现不同节点的数据采集和传递;最后,针对各节点链路数据到达服务端先后顺序不一的问题,通过时序对齐方式进行全链路数据的同步和汇总。在公开的微服务调用链路数据集上的实验结果表明,相较于全量采集和采样采集方法,所提方法对于包含异常、慢响应等特定事件的链路数据具有采集准确性高、效率好的效果。     

基于集群节点间即时拷贝的会话同步技术研究

集群会话同步技术目前主要有如下几种：基于Cookie的会话同步,基于数据库的会话同步,基于分布式缓存的会话同步.在以上会话同步技术的基础上,提出了一种基于集群节点间即时拷贝的会话同步技术,将会话标识信息存放在客户端中,避免了在客户端中存放完整的会话信息,从而可防止用户身份信息暴露的安全隐患;同时,在客户端向服务器发送请求的过程中,只携带会话标识信息,而不是完整的会话信息,传输的数据量将大大减少,提高了客户端对服务器的访问效率;各集群节点间同步会话信息,不需要从数据库中获取会话信息,避免了频繁使用数据库带来的性能瓶颈;也不需要使用专门的会话缓存服务器,减低了开发和部署成本,并具有良好的应用前景.     

基于ESB的共享数据中心的研究与实现

针对数字化校园建设过程中如何保持应用系统间数据一致性的问题,在分析了几种实现数据同步的技术的基础上,提出一种基于企业服务总线ESB(Enterprise Service Bus)的共享数据中心实现数据同步的方案,成功实现了数字化校园中多个系统间的数据同步,对于处理分布式系统间的数据同步问题具有一定的借鉴意义。