面向单视图室内场景高保真整体重建
计算机视觉与模式识别
2022-08-09 v2
摘要
我们提出一种从单视图图像重建包含房间背景与室内物体的整体三维室内场景的新框架。现有方法由于室内场景的严重遮挡,只能生成几何质量有限的室内物体三维形状。为此,我们提出实例对齐隐式函数(InstPIFu)用于精细物体重建。结合实例对齐注意力模块,我们的方法能够解耦朝向被遮挡实例的混合局部特征。此外,不同于以往将房间背景简单表示为三维包围盒、深度图或一组平面的方法,我们通过隐式表示恢复背景的精细几何。在 SUN RGB-D、Pix3D、3D-FUTURE 和 3D-FRONT 数据集上的大量实验表明,我们的方法在背景与前景物体重建上均优于现有方法。我们的代码与模型将公开可用。
引用
@article{arxiv.2207.08656,
title = {Towards High-Fidelity Single-view Holistic Reconstruction of Indoor Scenes},
author = {Haolin Liu and Yujian Zheng and Guanying Chen and Shuguang Cui and Xiaoguang Han},
journal= {arXiv preprint arXiv:2207.08656},
year = {2022}
}
备注
ECCV 2022, project page: https://github.com/UncleMEDM/InstPIFu