首页 | 本学科首页   官方微博 | 高级检索  
     

结构约束下的生成对抗深度图修复
引用本文:卢奇,龚勋.结构约束下的生成对抗深度图修复[J].数据采集与处理,2023,38(5):1048-1057.
作者姓名:卢奇  龚勋
作者单位:1.西南交通大学计算机与人工智能学院,成都 610031;2.可持续城市交通智能化教育部工程研究中心,成都 610031;3.四川省制造业产业链协同与信息化支撑技术重点实验室,成都 610031
基金项目:国家自然科学基金(62376231);四川省重点研发项目(2023YFG0267,2023YFS0202);中央高校基本科研业务费科技创新项目(2682021ZTPY030,2682022KJ045)。
摘    要:不同于纹理图像,深度图像中的像素点代表采集设备到场景各点的距离,直接使用通用图像修复方法并不能有效恢复深度图像中缺失区域的场景结构,本文提出一个两阶段编解码结构的生成对抗网络以解决深度图像修复问题。与常见生成对抗网络(Generative adversarial networks,GAN)模型不同,本文的生成器网络包括深度生成G1和深度修复G2两个模块。G1模块从RGB图像得到预测深度,替换待修复深度图像缺失区域,保证修复区域局部结构一致性。G2模块引入RGB图像边缘结构,保证全局结构一致性。针对现有图像修复方法没有考虑到修复区域间的一致性问题,设计结构一致注意力模块(Structure coherent attention,SCA)加入到G2中改善修复效果。本文提出的深度图像修复模型在主流数据集上进行了验证,利用结构约束并经过两阶段的生成器模型和判别器模型的共同作用,有效改善了深度图像修复效果。

关 键 词:深度图像  图像修复  两段式生成对抗网络  边缘结构信息
收稿时间:2022/3/24 0:00:00
修稿时间:2023/3/11 0:00:00

Generate Adversarial Depth Repair Under Structural Constraints
Lu Qi,Gong Xun.Generate Adversarial Depth Repair Under Structural Constraints[J].Journal of Data Acquisition & Processing,2023,38(5):1048-1057.
Authors:Lu Qi  Gong Xun
Affiliation:1.School of Computing and Artificial Intelligence, Southwest Jiaotong University, Chengdu 610031, China;2.Engineering Research Center of Sustainable Urban Intelligent Transportation, Chengdu 610031, China;3.Manufacturing Industry Chains Collaboration and Information Support Technology Key Laboratory of Sichuan Province, Chengdu 610031, China
Abstract:
Keywords:depth image  image inpainting  two-stage generative adversarial networks  edge information
点击此处可从《数据采集与处理》浏览原始摘要信息
点击此处可从《数据采集与处理》下载全文
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号