在家中进行高质量的面部几何与外观捕捉

面部几何和外观捕捉在工作室中扫描真实人类方面已展现出巨大成功。近期工作提出在保持高质量结果的同时普及这项技术。然而，它们对于日常使用仍然不便。此外，它们专注于仅捕捉面部皮肤这一较简单的问题。本文提出了一种新颖的高质量面部捕捉方法，具有易于使用的系统，并能建模完整面部，包括皮肤、口腔内部、头发和眼睛。我们从在暗室（例如拉上窗帘的房间或夜间）中拍摄的单个同位置智能手机闪光灯序列中重建面部几何和外观，其中闪光灯是主要光源。为了建模完整面部，我们提出了一种新颖的混合表示，以有效建模眼睛和其他面部区域，并提出了从图像中学习它的新技术。我们应用组合光照模型来紧凑表示真实光照，并利用可变形面部反照率模型作为反射先验来分离漫反射和镜面反射。实验表明，我们的方法可以捕捉高质量的可重光照3D扫描。