通过可微分光线追踪进行人脸反射率和几何建模
计算机视觉与模式识别
2019-10-14 v1 图形学
摘要
我们提出了一种新颖的策略,可以从单目图像自动重建3D人脸,并明确解耦面部几何(姿态、身份和表情)、反射率(漫反射和高光反照率)以及自阴影。场景光照被建模为一个虚拟光舞台,使用预先定向的面光源,并结合可微分的蒙特卡罗光线追踪来优化场景和人脸参数。通过正确解耦的自阴影和高光反射参数,我们不仅可以获得鲁棒的面部几何重建,还可以获得对这些参数的显式控制,具有多种实际应用。我们可以改变面部表情并得到准确的相应自阴影,或者重新照亮场景并获得准确的高光反射以及其他几种参数组合。
引用
@article{arxiv.1910.05200,
title = {Face Reflectance and Geometry Modeling via Differentiable Ray Tracing},
author = {Abdallah Dib and Gaurav Bharaj and Junghyun Ahn and Cedric Thebault and Philippe-Henri Gosselin and Louis Chevallier},
journal= {arXiv preprint arXiv:1910.05200},
year = {2019}
}