Pix3D：面向单图像三维形状建模的数据集与方法
计算机视觉与模式识别
2018-04-13 v1 机器学习
摘要
我们研究从单幅图像进行三维形状建模，并在三个方面做出贡献。首先，我们提出 Pix3D，一个具有像素级二维-三维对齐的多样化图像-形状对大规模基准。Pix3D 在包括重建、检索、视角估计等形状相关任务中有广泛应用。然而，构建这样一个大规模数据集极具挑战性；现有数据集要么仅包含合成数据，要么缺乏二维图像与三维形状之间的精确对齐，要么只有少量图像。其次，我们通过行为研究校准了三维形状重建的评估准则，并利用这些准则在 Pix3D 上客观、系统地评测前沿重建算法。第三，我们设计了一种同时执行三维重建与位姿估计的新模型；我们的多任务学习方法在两项任务上均达到了最先进的性能。
引用
@article{arxiv.1804.04610,
title = {Pix3D: Dataset and Methods for Single-Image 3D Shape Modeling},
author = {Xingyuan Sun and Jiajun Wu and Xiuming Zhang and Zhoutong Zhang and Chengkai Zhang and Tianfan Xue and Joshua B. Tenenbaum and William T. Freeman},
journal= {arXiv preprint arXiv:1804.04610},
year = {2018}
}
备注
CVPR 2018. The first two authors contributed equally to this work. Project page: http://pix3d.csail.mit.edu