神经 Lumigraph 渲染
计算机视觉与模式识别
2021-03-23 v1 图形学
摘要
新视角合成是一个具有挑战性且不适定的逆渲染问题。神经渲染技术近期在该任务上实现了照片级真实感的图像质量。然而，最先进的 (SOTA) 神经体渲染方法训练缓慢，且对于高图像分辨率需要数分钟的推理（即渲染）时间。我们采用具有周期激活函数的高容量神经场景表示，在仅由带位姿的 2D 图像监督的情况下联合优化场景的隐式表面和辐射场。我们的神经渲染流水线将 SOTA 神经体渲染加速了约两个数量级，并且我们的隐式表面表示独特地允许我们导出带有视角相关纹理信息的网格。因此，与其他隐式表面表示一样，我们的表示与传统图形流水线兼容，能够实现实时渲染速率，同时与其他表面方法相比实现了前所未有的图像质量。我们使用现有数据集以及用定制多相机装置捕获的高质量 3D 人脸数据来评估我们方法的质量。
引用
@article{arxiv.2103.11571,
title = {Neural Lumigraph Rendering},
author = {Petr Kellnhofer and Lars Jebe and Andrew Jones and Ryan Spicer and Kari Pulli and Gordon Wetzstein},
journal= {arXiv preprint arXiv:2103.11571},
year = {2021}
}
备注
Project website: http://www.computationalimaging.org/publications/nlr/