形式化描述驱动的数据帧解析与处理

在过程工业的数据采集和通讯领域中,数据帧是较为常见的一种数据形式。对于同一应用领域来说,建立在数据帧基础上的操作要求通常是相同的,但在不同的具体工程项目中,需要处理的数据帧的格式却经常不同。为了对不同格式的数据帧进行解析和处理,可以用形式化描述的方法对数据帧的格式进行描述,在形式化描述的驱动下实现与数据帧格式无关的数据帧解析和处理,从而避免分别为不同的数据帧格式编写相应的解析和处理程序,使数据帧的解析和处理程序具有更好的灵活性和普适性。论文讨论了基于形式化描述驱动的数据帧解析与处理的实现方案。     

基于用户定制的数据帧处理技术

在过程工业的控制中存在着大量的通信协议,这些协议基本都是建立在数据帧的基础之上,其差别在于数据帧的格式,要对协议进行解析和处理,只需要对相应的数据帧进行解析和处理即可.讨论了用形式化描述的方法对数据帧格式进行描述,并在此基础上实现与数据帧格式无关的数据帧解析和处理.从而避免了针对不同通信协议的数据帧格式均要编写相应的解析和处理程序,使协议的解析和处理具有更好的灵活性和普适性.     

基于类PCM结构过程的试飞多科目iNET处理技术

飞行试验网络化iNET测试系统正逐渐取代传统的PCM测试系统,成为当前飞行试验测试系统的主要架构;网络化iNET测试系统下对多科目数据处理提出了更高的要求,针对试验多科目数据处理的特点,文章提出了一种基于类PCM结构中间存储的多科目数据处理方法,借鉴成熟的PCM组帧技术和解析方法,打破传统试验多科目处理模式,提高了多科目处理效率,解决了海量试验数据多科目处理难题,满足了现代飞行试验多科目快速处理需求。     

基于数据特性的Spark任务性能优化

新一代的分布式数据处理框架大大提升了数据处理任务的效率。然而,由于不同数据处理任务需要处理的数据的特性各不相同,因此难以找到一种统一的方法来优化数据处理任务的性能。针对不同的数据集,需要分析其相应的数据特性,才能充分利用内存和计算资源,优化任务执行效率。研究数据倾斜度这一数据特性,提出一种数据倾斜度的量化方法,基于分布式处理框架Spark,通过结合数据采样分析和源代码语义分析的方法,自动判断当前所处理数据集的数据倾斜度与处理代码的适合程度,并基于判断结果提出相应的代码自动优化方案,从而提升任务的运行效率。通过多个数据处理实验,验证了优化后提高数据分析任务效率的效果。     

Excel数据处理常用方法分类解析

Excel中,我们经常要用到有关数据处理的函数和公式,用以处理纷繁复杂的数据信息。数据处理的方法包括数据筛选、数据统计和数据计算等等。这些数据处理的方法很实用,为我们处理庞大的数据信息带来了很大的便利。对这些方法进行归类和解析,更有助于初学者更快更迅速地掌握和理解这些数据处理的方法。     

一种基于iframe的嵌入式浏览器动态数据处理策略与实现

嵌入式浏览器的运行处理机制中,对动态数据的灵活处理及显示是一个难点问题.本文研究了一种基于iframe数据关联的嵌入式浏览器动态数据处理策略,对该策略进行了详细的阐述,并在嵌入式系统中加以实现.实验结果表明,本方案与传统方案相比,降低了动态数据处理的复杂度,并明显提高了响应速度.     

基于DLL的人员定位跟踪系统数据处理模块的设计

针对人员定位跟踪系统数据相关性大的特点,文章提出了一种基于DLL的人员定位跟踪系统数据处理模块的设计方案,介绍了人员定位跟踪系统的组成,阐述了数据处理模块的处理内容,并给出了井下人员数据帧的处理流程及注意事项。该数据处理模块采用DLL封装,保证了数据处理过程的独立性。     

基于XML的数据解析软件设计与实现

在开展数据处理和数据分析的工作前,常常需要对采集的原始数据进行解析处理,常规的方法是针对大量的数据接口分别开发解析代码,这样做不仅工作量大,代码冗余度高,日后对接口进行修改或添加时都需要同步修改解析程序的相应代码,给数据分析处理工作带来极大的困难。为了有效解决这一问题,该文提出了一种基于XML的数据解析方法,实现接口定义和程序编码的隔离,能够在不改动程序代码情况下,实现数据接口的按需添加或修改,有利于节约后期针对解析程序的开发和维护成本。     

基于VB的传感器信号数据处理方案设计

基于VB,设计了棉麻纤维纱线晶变改性成套装备传感器信号数据处理方案.方案主要由数据标定、数据滤波、数据补偿、数据应用及储存四部分组成.介绍了传感器相关参数,给出了传感器物理值计算公式.通过数据滤波,降低了数据采集过程中随机干扰对数据造成的随机误差.通过数据补偿,采集值更加接近传感器液晶屏数显值.对处理后数据应用的同时将数据导入到SQL数据库保存.经现场运行,该方案稳定可靠,满足了设计要求.     

高速卫星遥测数据处理系统的设计方案

为了解决高速下行的卫星遥测数据的接收和处理问题,对地面卫星遥测数据处理系统进行了研究.针对集中式卫星遥测数据处理系统无法正常接收和解析下行速率较高的遥测数据的缺点,提出了一种基于分布式处理的遥测数据处理系统的设计方案.该方案将分布式系统构架和并行计算技术相结合,把原始的单机处理过程分散到多台计算机上,同时利用多台计算机的计算能力对数据进行处理.仿真测试结果表明,该方案有效地解决了集中式数据处理系统接收高速遥测数据丢包的问题,同时也具有较高的可重用性和扩展性.