中文

BakedSDF:网格化神经 SDF 以实现实时视角合成

计算机视觉与模式识别 2023-05-17 v2

摘要

我们提出了一种重建大规模无界真实世界场景高质量网格的方法,适用于照片级真实的新视角合成。我们首先优化一种混合神经体积-表面场景表示,其设计具有行为良好的水平集,对应于场景中的表面。然后我们将该表示烘焙为高质量三角网格,并为其配备基于球面高斯函数的简单快速的视角相关外观模型。最后,我们优化该烘焙表示以最佳复现所捕获的视角,从而得到一种能够利用加速多边形光栅化管线在商用硬件上实现实时视角合成的模型。我们的方法在精度、速度和功耗方面优于以往的实时渲染场景表示,并生成支持外观编辑和物理模拟等应用的高质量网格。

关键词

引用

@article{arxiv.2302.14859,
  title  = {BakedSDF: Meshing Neural SDFs for Real-Time View Synthesis},
  author = {Lior Yariv and Peter Hedman and Christian Reiser and Dor Verbin and Pratul P. Srinivasan and Richard Szeliski and Jonathan T. Barron and Ben Mildenhall},
  journal= {arXiv preprint arXiv:2302.14859},
  year   = {2023}
}

备注

Video and interactive web demo available at https://bakedsdf.github.io/