| 影子辅助的三维人体重建 |
| |
| 引用本文： | 康杨雨轩, 石剑, 任丽欣, 刘艳丽, 吴恩华. 影子辅助的三维人体重建[J]. 计算机辅助设计与图形学学报, 2023, 35(11): 1643-1653. DOI: 10.3724/SP.J.1089.2023.19743 |
| |
| 作者姓名： | 康杨雨轩 石剑 任丽欣 刘艳丽 吴恩华 |
| |
| 作者单位： | 1 中国科学院软件研究所计算机科学国家重点实验室 北京 100190;2 中国科学院大学 北京 100049;3 中国科学院自动化研究所模式识别国家重点实验室 北京 100090;4 四川大学计算机学院 成都 610024;5 澳门大学 澳门 999078 |
| |
| 基金项目： | 国家自然科学基金(62072449,61972271,62002358). |
| |
| 摘 要： | 光线投射至地面的人体影子可以为人体重建任务提供约束信息,有助于缓解单目图像中的深度歧义问题和自遮挡问题.为了重建三维人体模型,提出一种基于影子输入和深度神经网络的重建方法.首先搭建2个独立的卷积神经网络模块用于提取图像特征和影子特征,并估计对应的人体模型参数;然后建立一个可导投影算子(differentiable projection operator,DPO)对齐2个网络的输出;最后将DPO构建的损失函数应用于微调神经网络和直接优化输出.在Human3.6M合成影子数据集上的实验结果表明,与基线方法相比,微调神经网络的关节误差指标下降了1.4~4.9 mm;在自采集的一个含真实影子的3人2视角小规模数据集上的定性实验结果表明,直接优化的人体姿态更加接近原始图像.
|
| 关 键 词： | 三维人体重建 人体影子轮廓 参数化人体模型 深度神经网络 |
| 收稿时间： | 2022-06-02 |
| 修稿时间： | 2022-08-03 |
|
| 点击此处可从《计算机辅助设计与图形学学报》浏览原始摘要信息 |
|
点击此处可从《计算机辅助设计与图形学学报》下载全文 |
|
