学习神经参数化头部模型
计算机视觉与模式识别
2023-04-17 v2
摘要
我们提出一种基于混合神经场的完整人头的新型3D可变形模型。我们模型的核心在于一种将身份与表情解耦于不相交潜空间中的神经参数化表示。为此,我们将人的身份在规范空间中捕获为有符号距离场(SDF),并用神经形变场建模面部表情。此外,我们的表示通过引入以面部锚点为中心的局部场集合来实现高保真局部细节。为促进泛化,我们使用定制的高端3D扫描装置在新捕获的包含255个不同身份的逾5200份头部扫描的数据集上训练模型。我们的数据集在几何质量与完整性上均显著超越现有可比数据集,每次扫描平均约3.5M网格面。最后,我们证明我们的方法在拟合误差与重建质量上优于state-of-the-art方法。
引用
@article{arxiv.2212.02761,
title = {Learning Neural Parametric Head Models},
author = {Simon Giebenhain and Tobias Kirschstein and Markos Georgopoulos and Martin Rünz and Lourdes Agapito and Matthias Nießner},
journal= {arXiv preprint arXiv:2212.02761},
year = {2023}
}
备注
Project Page: https://simongiebenhain.github.io/NPHM ; Project Video: https://www.youtube.com/watch?v=0mDk2tFOJCg ; Camer-Ready Version; Added Experiments