中文

Im2Mesh GAN:从单张RGB图像精确恢复三维手部网格

计算机视觉与模式识别 2021-01-28 v1

摘要

本工作研究从单张RGB图像恢复手部网格。与多数采用参数化手部模型作为先验的现有方法不同,我们表明手部网格可直接从输入图像学习。我们提出一种称为Im2Mesh GAN的新型GAN,通过端到端对抗训练学习网格。通过将网格解释为图,我们的模型能够捕捉网格顶点间的拓扑关系。我们还将一种三维表面描述子引入GAN架构以进一步捕捉相关的三维特征。我们实验了两种方法:一种可利用图像与对应网格的耦合真值数据可用性,另一种则应对无对应真值情况下网格估计这一更具挑战性的问题。通过大量评估,我们证明所提方法优于当前最优(state-of-the-art)方法。

关键词

引用

@article{arxiv.2101.11239,
  title  = {Im2Mesh GAN: Accurate 3D Hand Mesh Recovery from a Single RGB Image},
  author = {Akila Pemasiri and Kien Nguyen Thanh and Sridha Sridharan and Clinton Fookes},
  journal= {arXiv preprint arXiv:2101.11239},
  year   = {2021}
}