可动画化面部虚拟化身创建的民主化

在高端视觉效果流程中，通常使用定制的（且昂贵的）光场系统来扫描演员，以获取各种表情的几何和纹理。为了实现民主化，我们提出了一种新颖的流程，无需使用光场或任何其他高端硬件（或手动清理），即可获取几何、纹理以及足够的表情信息，以构建定制的个性化动画绑定。一个关键的新颖想法是将真实世界图像变形，使其与模板虚拟化身的几何对齐，然后将变形后的图像投影到模板虚拟化身的纹理中；重要的是，这使我们能够利用内嵌的真实世界光照/纹理信息来创建替代面部特征（并弥合领域差距），以用于几何重建。我们的方法不仅可用于获取中性表情几何和去光照纹理，还可用于在虚拟化身导入动画系统后对其进行改进（注意到此类导入往往是有损的，同时还会幻觉出各种特征）。由于默认的动画绑定将包含与特定个体表情不对应的模板表情，我们使用一种“西蒙说”方法来捕捉各种表情并构建一个个性化的动画绑定（使其动作与本人一致）。我们上述的扭曲/投影方法具有足够高的效能，可以重建对应于每种表情的几何。