首页 | 本学科首页   官方微博 | 高级检索  
     

基于动态门控特征融合的轻量深度补全算法
引用本文:孙海峰,穆正阳,戚琦,王敬宇,刘聪,廖建新. 基于动态门控特征融合的轻量深度补全算法[J]. 软件学报, 2023, 34(4): 1765-1778
作者姓名:孙海峰  穆正阳  戚琦  王敬宇  刘聪  廖建新
作者单位:网络与交换国家重点实验室(北京邮电大学),北京100876;中国移动通信有限公司研究院,北京100053
基金项目:国家重点研发计划(2020YFB1807805); 国家自然科学基金(62071067, 62001054, 61771068)
摘    要:稠密深度图在自动驾驶和机器人等领域至关重要,但是现今的深度传感器只能产生稀疏的深度测量,所以有必要对其进行补全.在所有辅助模态中, RGB图像是常用且易得的信息.现今的许多方法都采用RGB和稀疏深度信息结合进行补全.然而它们绝大部分都是利用通道拼接或逐元素求和简单的对两种模态的信息进行融合,没有考虑到不用场景下不同模态特征的置信度.提出一种以输入深度稀疏分布为指导,结合双模态信息量的动态门控融合模块,通过动态产生融合权重的方式对两个模态特征进行更高效的结合.并且根据不同模态的数据特征设计了精简的网络结构.实验结果表明所提出模块和改进的有效性,提出的网络在两个有挑战性的公开数据集KITTI depth completion和NYU depth v2上,使用了很少的参数量达到了先进的结果,取得了性能和速度的优秀平衡.

关 键 词:深度补全  特征融合  轻量模型  图像处理  自动驾驶
收稿时间:2020-12-27
修稿时间:2021-03-08

Fast and Accurate Depth Completion Method Based on Dynamic Gated Fusion Strategy
SUN Hai-Feng,MU Zheng-Yang,QI Qi,WANG Jing-Yu,LIU Cong,LIAO Jian-Xin. Fast and Accurate Depth Completion Method Based on Dynamic Gated Fusion Strategy[J]. Journal of Software, 2023, 34(4): 1765-1778
Authors:SUN Hai-Feng  MU Zheng-Yang  QI Qi  WANG Jing-Yu  LIU Cong  LIAO Jian-Xin
Affiliation:State Key Laboratory of Networking and Switching Technology (Beijing University of Posts and Telecommunications), Beijing 100876, China;China Mobile Research Institute, Beijing 100053, China
Abstract:
Keywords:depth completion  feature fusion  light-weighted model  image processing  autonomous driving
本文献已被 万方数据 等数据库收录!
点击此处可从《软件学报》浏览原始摘要信息
点击此处可从《软件学报》下载全文
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号