艺术家友好的可重光照与可动画神经头部
计算机视觉与模式识别
2023-12-07 v1 图形学
摘要
创建逼真数字替身的一种日益常见的方法是使用体积神经场。最初的神经辐射场（NeRF）在基于一组多视图图像训练时，能够实现令人印象深刻的静态头部新视角合成，后续方法表明这些神经表示可以扩展到动态替身。最近，新变体还克服了神经表示中光照固定的常见缺点，表明静态神经替身可以在任何环境中重新光照。在这项工作中，我们同时处理运动和光照问题，提出了一种用于可重光照和可动画神经头部的新方法。我们的方法基于一种成熟的动态替身方法，该方法结合了体积基元混合，并与最近提出的用于可重光照神经场的轻量级硬件设置相结合，并包含一种新颖架构，允许在任何环境中对执行未见表情的动态神经替身进行重光照，即使是在近场光照和视角下。
引用
@article{arxiv.2312.03420,
title = {Artist-Friendly Relightable and Animatable Neural Heads},
author = {Yingyan Xu and Prashanth Chandran and Sebastian Weiss and Markus Gross and Gaspard Zoss and Derek Bradley},
journal= {arXiv preprint arXiv:2312.03420},
year = {2023}
}