基于多视图图像体积渲染的拓扑一致性人脸网格重建
计算机视觉与模式识别
2025-10-07 v2
摘要
工业级3D人脸资产创建通常从多视图图像重建拓扑一致性的人脸网格，以用于下游制作。然而，高质量的重建通常需要人工处理或特定的采集设置。最近，NeRF在3D重建中展现出巨大优势，它通过将场景表示为密度场和辐射场，并利用神经体积渲染进行新视角合成。受此启发，我们引入了一种新方法，将显式网格与神经体积渲染相结合，在保持拓扑不变的同时，从多视图图像优化艺术家制作的模板人脸网格的几何结构。该方法以距离场为中介从网格导出密度场，并将辐射场编码在紧凑的三平面中。为了改善收敛性，我们在体积渲染中引入了几种针对网格的适配。实验表明，与以往方法相比，该方法实现了更优的重建质量，验证了将网格与神经体积渲染相结合的可行性。
引用
@article{arxiv.2404.05606,
title = {Reconstructing Topology-Consistent Face Mesh by Volume Rendering from Multi-View Images},
author = {Yating Wang and Ran Yi and Xiaoning Lei and Ke Fan and Jinkun Hao and Lizhuang Ma},
journal= {arXiv preprint arXiv:2404.05606},
year = {2025}
}