利用自由视点神经渲染进行外观编辑
计算机视觉与模式识别
2021-10-18 v1
摘要
我们提出了一种神经渲染框架，用于从已知环境光照下捕获的多视图图像中同时进行视图合成和场景外观编辑。现有方法要么仅实现视图合成，要么实现视图合成与重新光照，但无法直接控制场景的外观。我们的方法显式地解耦了外观，并学习了一个独立于外观的光照表示。具体来说，我们独立估计了BRDF，并利用它来学习场景的仅光照表示。这种解耦使得我们的方法在执行视图合成时能够泛化到任意的外观变化。我们展示了编辑真实场景外观的结果，证明了我们的方法能够产生逼真的外观编辑效果。我们的视图合成方法在真实和合成数据上的性能被证明与最先进的方法相当。
引用
@article{arxiv.2110.07674,
title = {Appearance Editing with Free-viewpoint Neural Rendering},
author = {Pulkit Gera and Aakash KT and Dhawal Sirikonda and Parikshit Sakurikar and P. J. Narayanan},
journal= {arXiv preprint arXiv:2110.07674},
year = {2021}
}