中文

S2F2:基于单目图像的自监督高保真人脸重建

计算机视觉与模式识别 2022-04-06 v2 图形学 机器学习

摘要

我们提出了一种新颖的人脸重建方法,能够从单张单目图像重建出精细的人脸几何结构与空间变化的面部反射率。我们的工作建立在近期基于 DNN 的自编码器与可微光线追踪图像生成模型进展之上,并以自监督方式训练。尽管此类方法具备学习型方法的优势并可实时重建,但其保真度不足。在本工作中,我们首次仅使用自监督学习即实现了高保真人脸重建。我们新颖的由粗到细深度架构使我们能够以高计算速度解决从单张图像解耦人脸反射率与几何结构这一挑战性问题。与最先进(SOTA)方法相比,我们的方法实现了更具视觉吸引力的重建效果。

关键词

引用

@article{arxiv.2203.07732,
  title  = {S2F2: Self-Supervised High Fidelity Face Reconstruction from Monocular Image},
  author = {Abdallah Dib and Junghyun Ahn and Cedric Thebault and Philippe-Henri Gosselin and Louis Chevallier},
  journal= {arXiv preprint arXiv:2203.07732},
  year   = {2022}
}

备注

24 Pages, 22 Figures