| 基于姿态信息的人与物体交互检测模块网络 |
| |
| 引用本文： | 梁志军,刘栋. 基于姿态信息的人与物体交互检测模块网络[J]. 计算机应用研究, 2021, 38(8): 2299-2302. DOI: 10.19734/j.issn.1001-3695.2020.11.0429 |
| |
| 作者姓名： | 梁志军 刘栋 |
| |
| 作者单位： | 广东工业大学机电工程学院,广州510006;广东工业大学计算机学院,广州510006 |
| |
| 基金项目： | 广东省前沿与关键技术创新专项资助项目(2017B050506008);广东省重点领域研发计划资助项目(2019B090915001) |
| |
| 摘 要： | 针对在相对密集场景下检测不佳的普遍现象,提出了基于人体姿态信息输入的模块化神经网络,通过构建绝对姿态特征和相对空间姿态特征来促进人与物体交互关系的检测.该算法主要包含两个分支:a)通过全连接层网络来独立处理每个人体关节点相对于物体的空间姿态特征;b)通过全连接图神经网络来更新每个关节点的绝对姿态特征.最后通过一个行为分类网络基于融合后的特征来进行交互关系的推断.该模块网络结合先进的检测模型VS-GATs在数据集V-COCO和HICO-DET上取得了显著的提升效果:在V-COCO上,比VS-GATs的检测结果提升2 mAP(约4％);在更有挑战性的HICO-DET上,比VS-GATs的检测结果提升0.98 mAP(约4.6％).实验表明了所构建特征的有效性以及设计的网络的优越性.
|
| 关 键 词： | 人与物体交互关系检测 人体姿态 特征融合 神经网络 |
| 收稿时间： | 2020-11-06 |
| 修稿时间： | 2021-07-08 |
Pose-based modular network for human-object interaction detection |
| |
| Liang Zhijun and Liu Dong. Pose-based modular network for human-object interaction detection[J]. Application Research of Computers, 2021, 38(8): 2299-2302. DOI: 10.19734/j.issn.1001-3695.2020.11.0429 |
| |
| Authors: | Liang Zhijun and Liu Dong |
| |
| Affiliation: | Guangdong University of Technology, |
| |
| Abstract: | |
| |
| Keywords: | human-object interaction detection human pose features fusion neural network |
| 本文献已被 万方数据 等数据库收录！ |
| 点击此处可从《计算机应用研究》浏览原始摘要信息 |
|
点击此处可从《计算机应用研究》下载全文 |
