| 基于CNN-LSTM双流融合网络的危险行为识别 |
| |
| 引用本文： | 高治军,顾巧瑜,陈平,韩忠华. 基于CNN-LSTM双流融合网络的危险行为识别[J]. 数据采集与处理, 2023, 38(1): 132-140 |
| |
| 作者姓名： | 高治军 顾巧瑜 陈平 韩忠华 |
| |
| 作者单位： | 1.沈阳建筑大学信息与控制工程学院，沈阳 110168;2.中北大学信息与通信工程学院，太原 030051 |
| |
| 基金项目： | 国家重点研发计划(2018YFF0300304-04)。 |
| |
| 摘 要： | 针对目前人体危险行为识别过程中由于时空特征挖掘不充分导致精度不够的问题，对传统双流卷积模型进行改进，提出了一种基于CNN-LSTM的双流卷积危险行为识别模型。该模型将CNN网络与LSTM网络并联，其中CNN网络作为空间流，将人体骨架空间运动姿态分为静态与动态特征进行分别提取，两者融合作为空间流的输出；在时间流中采用改进的可滑动长短时记忆网络，以增加人体骨架时序特征的提取能力；最后将两个分支进行时空融合，利用Softmax对危险动作做出分类识别。在公开的NTU-RGB+D数据集和Kinetics数据集上的实验结果表明，改进后模型的平均跨角度（Cross view,CV）精度达到92.5%，平均跨视角（Cross subject,CS）精度为87.9%。所提方法优于改进前及其他方法，可以有效地对人体危险动作做出识别，同时对于模糊动作也有较好的区分效果。
|
| 关 键 词： | 人体骨架 危险行为识别 卷积神经网络 长短时记忆网络 融合实验 |
| 收稿时间： | 2021-11-12 |
| 修稿时间： | 2022-10-10 |
Dangerous Behavior Recognition Based on CNN-LSTM Dual-Stream Fusion Network |
| |
| GAO Zhijun,GU Qiaoyu,CHEN Ping,HAN Zhonghua. Dangerous Behavior Recognition Based on CNN-LSTM Dual-Stream Fusion Network[J]. Journal of Data Acquisition & Processing, 2023, 38(1): 132-140 |
| |
| Authors: | GAO Zhijun GU Qiaoyu CHEN Ping HAN Zhonghua |
| |
| Affiliation: | 1.School of Information and Control Engineering, Shenyang Jianzhu University, Shenyang 110168, China;2.School of Information and Communication Engineering, North University of China, Taiyuan 030051, China |
| |
| Abstract: | |
| |
| Keywords: | human skeleton dangerous behavior recognition convolutional neural network (CNN) long short-term memory ( LSTM) fusion experiment |
|
| 点击此处可从《数据采集与处理》浏览原始摘要信息 |
|
点击此处可从《数据采集与处理》下载全文 |
