基于视图感知的单视图三维重建算法

作     者：王年 胡旭阳 朱凡 唐俊 WANG Nian;HU Xuyang;ZHU Fan;TANG Jun

作者机构：安徽大学电子信息工程学院合肥230031 起源人工智能研究院阿布扎比51133 

基　　金：国家自然科学基金(61772032) 

出 版 物：《电子与信息学报》 (Journal of Electronics & Information Technology)

年 卷 期：2020年第42卷第12期

页      码：3053-3060页

摘      要：尽管由于丢弃维度将3维(3D)形状投影到2维(2D)视图看似是不可逆的,但是从可视化到计算机辅助几何设计,各个垂直行业对3维重建技术的兴趣正迅速增长。传统基于物体深度图或者RGB图的3维重建算法虽然可以在一些方面达到令人满意的效果,但是它们仍然面临若干问题:(1)粗鲁的学习2D视图与3D形状之间的映射;(2)无法解决物体不同视角下外观差异所带来的的影响;(3)要求物体多个观察视角下的图像。该文提出一个端到端的视图感知3维(VA3D)重建网络解决了上述问题。具体而言,VA3D包含多邻近视图合成子网络和3D重建子网络。多邻近视图合成子网络基于物体源视图生成多个邻近视角图像,且引入自适应融合模块解决了视角转换过程中出现的模糊或扭曲等问题。3D重建子网络使用循环神经网络从合成的多视图序列中恢复物体3D形状。通过在ShapeNet数据集上大量定性和定量的实验表明,VA3D有效提升了基于单视图的3维重建结果。

主 题 词：视图感知 3维重建 视角转换 端到端神经网络 自适应融合 

学科分类：0711[理学-心理学类] 0808[工学-自动化类] 0809[工学-计算机类] 07[理学] 08[工学] 080401[080401] 0804[工学-材料学] 080402[080402] 081202[081202] 0812[工学-测绘类] 

核心收录：

D　O　I：10.11999/JEIT190986

馆 藏 号：203100054...