基于TCP多连接通信实时并发数据处理技术研究

针对自动气象观测站分布地区广、资料实时同步触发上传的特点,深入研究了基于TCP多连接通信的实时并发数据处理系统,详细介绍了该系统的工作原理和软件设计方案,尤其对决定系统时效性能的并发数据缓存设计给予了深入细致的阐述。该系统能满足对周期性大批量“浪涌”数据进行实时快速处理的要求。实际运行结果表明,该系统在自动气象观测站实时数据处理过程中资料处理及时准确,运行稳定可靠。     

一种准串行化并发控制算法

由于实时数据库应用的特性是满足事务的时限,在多数情况下,可串行化协议不适合实时数据库系统,必须放松标准。本文提出基于相似性的高优先级两段锁协议(H2PL)算法,在系统可以忍受的不一致性范围内,系统的性能提高了。     

一种新的实时数据库的乐观并发控制协议

针对一些并发控制协议中由于过多的事务重启动造成资源浪费,提出了一种新的乐观并发控制协议(Optimistic Concurrency Control),通过向后调整不严重冲突事务的动态串行化顺序,许多不必要的事务重启动可以避免。在一个事务的读阶段不用记录事务冲突和串行化限制,各种优先级冲突解决方法可以很方便地加入到该协议中,根据需要选择使用了优先级-中止-50机制。     

一种基于MPI的并发面向对象模型

1.引言面向对象程序设计方法是当今最有前途的软件设计技术之一。面向对象方法是与现实模型相对应的,而现实模型中的对象是并发活动的,因此面向对象方法被认为具有潜在的并发性。将面向对象技术和并发技术结合起来的并发面向对象技术是近几年才兴起的,是一个比较新的研究领域。近年来,国内外提出了许多并发面向对象模型,文[1]提出了Actor模型,在该模型中,对象被称为actor,它是自含的、交互的和独     

一种实时事务并发控制的新方法:SMVCC

提出了新颖的实时数据库事务并发控制方法：语义多版本并发控制协议（SMVCC）。利用实时数据库中存在多版本数据的特点,考虑实时数据和实时事务语义,结合实时数据库相似性概念,对传统多版本并发控制方法进行扩展,对不同事务采用不同并发控制策略,提高了事务并发度。     

一种新的实时事务并发控制方法

本文提出一种新的实时事务并发控制方法，并对其性能进行了模拟评测；与锁式协议，乐观协议，基于时间戳的协议相比，它可以获得更新的并发度，与诸如ε－可串行比、△－可串行化等一致性的放松可串行化并发控制技术相比，它维护强一致性，保证严格可串行化。     

提高Ada并发效率的一种途径

Ada的会合机制使我们能在高级语言一级上描述系统的并发活动,从而避免了在使用低级通信原语时所不可避免的问题。但由于会合机制是一种完全同步的实现机制,因此其并发效率较低。为此,本文提出：采用基于Ada保护对象的（异步）信箱机制实现Ada会合的服务模型,使之既具有会合机制的高可靠性,又能提高系统的并发度和实现效率。     

一种基于实时数据采集系统的数据处理方法

给出了实时数据采集系统的一种数据存储格式 ,并讨论了基于此格式的一般数据处理方法     

数据处理语言的数据流模型

一、为什么是数据流模型在受控核聚变实验中,有大量实验数据需采集和处理。目前,由VAX-11/750计算机上运行的DAS软件系统完成数据采集,同时将生数据(或称原始数据)实时图形显示并存储之。对     

一种并发的双子集语义Agent模型

在某个时间段里,如果有多个进程同时运行则称为并发.在多Agent系统(MAS)环境下,并发行为广泛存在而且尤为重要.这些并发行为可以分为相关和不相关两类,在Agent合作或竞争的情形下,存在大量相关的并发行为,Agent必须有能力对这些行为进行推理.针对多Agent系统中各Agent并发动作的特点,通过双子集语义,避免了逻辑全知及副作用等问题,通过区分宏观时间和微观时间,给出一个交叠式并发的语义模型,描述了宏观时间中的并发性,为基于并发的多Agent合作与竞争提供了逻辑基础.     

无人机测控信息实时处理与记录分析系统设计

提出了无人机测控信息实时处理与记录分析系统设计方案,介绍了测控信息实时处理与记录分析系统组成、设计原理和工作流程,以及采用的关键技术.飞行试验结果表明,本系统提高了无人机实时处理的性能,增强了系统自动化分析能力.     

基于RTX的实时数据处理系统

为了解决远程设备数据处理不及时的问题,提出了一种基于RTX实时操作系统的设备数据处理系统.该系统由RTX实时数据处理进程和人机交互进程两部分组成,其中RTX实时数据处理进程负责接收远程设备端的数据并进行实时的处理,将处理过的数据经共享内存和同步事件对象等通信方式,传输到Win32的人机交互进程进行显示和存储数据,同时用户可以通过控制指令修改远程设备的状态.实验证明,该系统解决了设备数据处理不及时的问题,保证了设备管控的实时性和稳定性,能够满足对远程设备进行实时管控的要求.     

接收与处理分离的实时大数据处理模型

在大数据处理过程中,系统必须有非常高的数据处理效率。为了满足对大数据实时、高效、稳定处理的需求,提出了一种接收与处理分离的数据处理模型。该数据处理模型由数据接收单元、内存数据库、原始数据分发单元、数据处理单元、处理数据分发单元、数据归并单元组成。接收单元负责接收、整合结构化数据与非结构化数据,把每条完整的数据放入内存数据库中;分发单元从内存数据库中检测获取数据,按照海量数据负载均衡算法把数据分发到数据处理单元;数据处理单元处理数据,处理结果放入内存数据库;处理数据分发单元继续从内存数据库中获取处理后的数据,并按照海量数据负载均衡算法把数据分发给数据归并单元。实验证明,使用该模型方法,系统保持了非常高效的处理效率。     

基于数据时态特性的实时事务并发控制

通过对数据时态特性及其对事务调度的影响进行分析,提出了基于数据时态特性的实时事务并发控制算法.该算法根据数据截止期及事务的执行时间估算,改进了事务的验证规则,对事务的提交顺序进行调整,提高了系统的实时性能.理论分析与实验结果表明:该算法降低了事务重启个数及超截止期百分率,性能要优于已有的实时并发控制算法.     

嵌入式软件仿真测试平台实时数据处理研究

实时数据处理在嵌入式软件仿真测试平台中起着要目标和实时数据处理的要求,提出了一种实时数据处理体系的逻辑模型,并对实时数据管理、事务调度、实时接口映射机制等关键技术进行了深入探讨.     

基于组态王的实时监控系统的数据处理

本文利用组态王提供的SQL访问功能和VB强大的数据库功能,根据转辙机测试台微机监控系统的要求,提出一种用VB6.0和组态王共同完成对实时监控系统的实时和历史数据的处理方法。     

利用 HTCondor 高通量计算框架处理 MODIS 时间序列遥感影像

随着卫星技术进步,越来越多的遥感数据可供各领域科研人员处理与分析。日益增长的数据量也带来了新的挑战：如何高效的处理长时间序列遥感数据。目前,无论从处理效率还是任务规模,现有的计算手段都很难满足当前需求。常用的商业 GIS 软件往往基于单机环境,扩展能力小,而基于主流分布式计算框架的处理方法,往往在功能上有所不足。在本文中,我们提出一种基于 HTCondor 高通量计算环境的 MODIS 时间序列遥感数据处理方法。该方法通过 HTCondor 系统高效管理与调度硬件资源,同时使用 Python 及其丰富的第三方开源库编写核心控制与处理模块。我们将复杂的工作流以有向无环图的方式呈现并一次提交,将成熟的计算环境与灵活的处理模块相结合,易于扩展与重复使用。实验表明系统可以支持大规模、多需求的遥感影像处理工作,部署便捷,可以显著提成处理效率。     

用DSP芯片开发实时数据采集与处理系统

本文讨论了用DSP芯片开发实时数据采集与处理系统的过程,软硬件的设计方法及注意的问题。     

针对高速数据流的大规模数据实时处理方法

以实时传感数据和历史感知数据为基础的各类计算需求逐渐成为当前物联网应用建设中的关键,如何实现基于高速数据流和大规模历史数据的实时计算成为数据处理领域的新挑战.现有批处理方式的MapReduce大规模数据处理技术难以满足此类计算的实时要求.文中结合城市车辆数据的实时采集与处理应用,在理论和实践分析的基础上,提出了一种针对高速数据流的大规模数据实时处理方法,并对方法中的本地阶段化流水线、中间结果缓存等关键技术瓶颈进行了改进.其中,根据系统参数控制阶段化流水线,使CPU得到了充分、有效利用;通过改造内外存数据结构、读写策略和替换算法,优化了本地中间结果的高并发读写性能.实验表明,上述方法可以显著提升大规模历史数据上数据流处理的实时性和可伸缩性.     

企业信息管理数据的并发控制

在开发企业信息管理系统的过程中，数据共享冲突往往是解决的关键之一。本文结合上海卷烟厂数据采集监控系统的设计，针对采用SQL Server数据库共享访问数据时出现的具体问题，探讨了解决并发控制的方法。