中文

ARCH++:重新审视可动画制作的着装人体重建

计算机视觉与模式识别 2022-03-01 v4 图形学

摘要

我们提出 ARCH++,一种基于图像的方法来重建具有任意服装风格的 3D 虚拟形象。我们重建的虚拟形象是可动画制作的且高度逼真,无论是在输入视图的可见区域还是未见区域。尽管先前工作在重建具有各种拓扑的可动画着装人体方面展现出巨大前景,我们观察到存在导致次优重建质量的根本局限。在本文中,我们重新审视基于图像的虚拟形象重建的主要步骤,并用 ARCH++ 解决这些局限。首先,我们引入一个端到端基于点的几何编码器,以更好地描述底层 3D 人体身体的语义,替代先前手工设计的特征。其次,为解决规范姿态下着装人体拓扑变化引起的占据歧义,我们提出一个具有跨空间一致性的协同监督框架,联合估计姿态空间和规范空间中的占据。最后,我们使用图像到图像翻译网络进一步细化重建表面上的详细几何与纹理,提升了任意视角下的保真度与一致性。在实验中,我们在公共基准和用户研究上展示了在重建质量和真实感上优于最先进方法。

关键词

引用

@article{arxiv.2108.07845,
  title  = {ARCH++: Animation-Ready Clothed Human Reconstruction Revisited},
  author = {Tong He and Yuanlu Xu and Shunsuke Saito and Stefano Soatto and Tony Tung},
  journal= {arXiv preprint arXiv:2108.07845},
  year   = {2022}
}

备注

published at ICCV 2021, project page: https://tonghehehe.com/archpp