中文

影院高斯:基于浅景深的实时 HDR 辐射场

计算机视觉与模式识别 2024-11-25 v4 图像与视频处理

摘要

辐射场方法在从多视图照片重建复杂场景方面处于最前沿,但这些重建常常受制于以下一个或两个限制:首先,它们通常以低动态范围 (LDR) 表示场景,这限制了其在均匀照明环境中的使用,并阻碍了沉浸式观看体验;其次,依赖针孔相机模型,假设输入图像中所有场景元素都在焦点内,这在实际中 presents实际挑战,并使 novel-view synthesis 中的 refocusing 变得复杂。为克服这些限制,我们提出了一种基于 3D 高斯 splatting 的轻量级方法,该方法利用多曝光时间、光圈和焦点距离的场景 LDR 多视图图像来重建高动态范围 (HDR) 辐射场。通过纳入基于薄透镜相机模型的高斯 analytical convolutions 以及 tonemapping 模块,我们的重建能够实现灵活的 refocusing 能力的 HDR 内容渲染。我们展示,HDR 与浅景深的综合处理促进了实时电影级渲染,优于最先进的方法。

关键词

引用

@article{arxiv.2406.07329,
  title  = {Cinematic Gaussians: Real-Time HDR Radiance Fields with Depth of Field},
  author = {Chao Wang and Krzysztof Wolski and Bernhard Kerbl and Ana Serrano and Mojtaba Bemana and Hans-Peter Seidel and Karol Myszkowski and Thomas Leimkühler},
  journal= {arXiv preprint arXiv:2406.07329},
  year   = {2024}
}