| 基于Spark的飞机试验数据预处理技术研究 |
| |
| 引用本文： | 李利荣,孙立伟,杨浩,王晓栋,房红征. 基于Spark的飞机试验数据预处理技术研究[J]. 计算机测量与控制, 2018, 26(12): 260-264 |
| |
| 作者姓名： | 李利荣 孙立伟 杨浩 王晓栋 房红征 |
| |
| 作者单位： | 上海民用飞机健康监控工程技术研究中心,,北京航天测控技术有限公司,, |
| |
| 摘 要： | 飞机飞行试验是飞机交付运营前的必要环节。在飞机飞行试验过程中会产生大量的试验数据,这些数据对飞机的研制、定型、改进具有重要意义。传统的试验数据预处理技术多采用单机工作模式,无法快速处理海量试验数据。鉴于此,对基于spark分布式内存计算技术进行了研究。通过预先剔除参数组中不存在于当前数据文件中的参数群,减少分布式集群间的数据通讯与航空领域429协议、232协议、664协议的数据预处理时间,提高飞行试验的效率。最后,选择30GB飞行试验数据作为实验对象进行验证。结果表明,该方法有效地提高了数据解析效率,克服了传统数据处理方式效率低下,单个机器内存和CPU等硬件条件不足的问题。
|
| 关 键 词： | 飞行试验、数据预处理、分布式技术、内存计算 |
| 收稿时间： | 2018-08-23 |
| 修稿时间： | 2018-09-21 |
Research on Preprocessing Technology of Aircraft Experimental DataBased on Spark |
| |
| Abstract: | |
| |
| Keywords: | flight test, data preprocessing, distributed technology, memory computing |
|
| 点击此处可从《计算机测量与控制》浏览原始摘要信息 |
|
点击此处可从《计算机测量与控制》下载免费的PDF全文 |
|
