SFDM：面向稀疏视图图像逼真人脸渲染的几何与反射率鲁棒分解
计算机视觉与模式识别
2025-03-18 v2
摘要
在本研究中，我们引入了一种新颖的两阶段技术，用于从稀疏视图图像中分解和重建面部特征，由于每个人独特的几何形状和复杂的皮肤反射率，这项任务具有挑战性。为了更逼真地合成3D面部模型，我们致力于从RGB颜色中解耦关键面部属性，包括几何、漫反射和镜面反射。具体来说，我们设计了一个稀疏视图面部分解模型：1）在第一阶段，我们从大量个体面部创建通用面部模板，封装了基本的几何和反射率特征。2）在第二阶段，在该模板的指导下，我们为每个个体细化特定的面部模型，考虑几何与反射率之间的相互作用，以及次表面散射对皮肤的影响。凭借这些进展，我们的方法可以从仅三张图像重建高质量的面部表示。全面的评估和比较表明，我们的方法通过有效解耦几何和反射率分量，显著提高了合成新视角的质量，并为面部重光照和反射率编辑应用铺平了道路，从而优于现有方法。
引用
@article{arxiv.2312.06085,
title = {SFDM: Robust Decomposition of Geometry and Reflectance for Realistic Face Rendering from Sparse-view Images},
author = {Daisheng Jin and Jiangbei Hu and Baixin Xu and Yuxin Dai and Chen Qian and Ying He},
journal= {arXiv preprint arXiv:2312.06085},
year = {2025}
}
备注
CVPR25