PeeledHuman:面向带纹理三维人体重建的鲁棒形状表示
计算机视觉与模式识别
2020-11-03 v2
摘要
我们提出PeeledHuman——一种对人体自遮挡具有鲁棒性的新颖人体形状表示。PeeledHuman将人体编码为一组二维的Peeled深度图与RGB图,通过对三维人体模型进行光线追踪并将每条光线延伸至首次交点之外获得。相较于其他表示,该表述使我们能高效处理自遮挡。给定单目RGB图像,我们使用新颖框架PeelGAN以端到端生成对抗方式学习这些Peeled图。我们利用三维Chamfer损失与其他二维损失训练PeelGAN,在双分支设置中生成逐像素多个深度值及逐顶点对应RGB场。在我们简单的非参数方案中,生成的Peeled深度图被反投影至三维空间以获得完整的带纹理三维形状。相应的RGB图提供顶点级纹理细节。我们将方法与当前的参数与非参数方法在三维重建中比较,发现我们取得了最先进的成果。我们在公开可用的BUFF与MonoPerfCap数据集以及由我们标定的多Kinect装置收集的宽松衣物数据上展示了该表示的有效性。
引用
@article{arxiv.2002.06664,
title = {PeeledHuman: Robust Shape Representation for Textured 3D Human Body Reconstruction},
author = {Sai Sagar Jinka and Rohan Chacko and Avinash Sharma and P. J. Narayanan},
journal= {arXiv preprint arXiv:2002.06664},
year = {2020}
}