HifiFace：基于3D形状与语义先验引导的高保真换脸
计算机视觉与模式识别
2021-06-21 v1
摘要
本文提出一种高保真换脸方法HifiFace，能很好地保留源人脸的形状并生成照片级真实结果。不同于其他仅使用人脸识别模型保持身份相似度的现有换脸工作，我们提出3D形状感知身份，借助3DMM和3D人脸重建方法的几何监督来控制人脸形状。同时，我们引入语义人脸融合模块优化编码器与解码器特征的组合并实现自适应混合，使结果更具照片级真实感。在野外人脸上的大量实验表明，我们的方法能更好地保留身份（尤其在脸型上），并比以往最先进的方法生成更具照片级真实感的结果。
引用
@article{arxiv.2106.09965,
title = {HifiFace: 3D Shape and Semantic Prior Guided High Fidelity Face Swapping},
author = {Yuhan Wang and Xu Chen and Junwei Zhu and Wenqing Chu and Ying Tai and Chengjie Wang and Jilin Li and Yongjian Wu and Feiyue Huang and Rongrong Ji},
journal= {arXiv preprint arXiv:2106.09965},
year = {2021}
}
备注
Accepted to IJCAI 2021, project website: https://johann.wang/HifiFace