中文

OmniGS:使用全向高斯泼溅的快速辐射场重建

计算机视觉与模式识别 2024-11-07 v5

摘要

依赖 3D Gaussian Splatting 的照片级真实重建在各个领域展现出了巨大的潜力。然而,当前的 3D Gaussian Splatting 系统仅支持使用无畸变的透视图像进行辐射场重建。在本文中,我们提出了 OmniGS,一种新型全向高斯泼溅系统,以利用全向图像进行快速辐射场重建。具体而言,我们对 3D Gaussian Splatting 中的球面相机模型导数进行了理论分析。根据这些导数,我们随后实现了一个新的 GPU 加速全向光栅化器,该光栅化器直接将 3D 高斯泼溅到等距柱状屏幕空间以进行全向图像渲染。我们实现了全向辐射场的可微优化,而无需立方体贴图校正或切平面近似。在以自我为中心和漫游场景中进行的广泛实验表明,我们的方法使用全向图像实现了 SOTA 的重建质量和极高的渲染速度。代码将公开发布。

关键词

引用

@article{arxiv.2404.03202,
  title  = {OmniGS: Fast Radiance Field Reconstruction using Omnidirectional Gaussian Splatting},
  author = {Longwei Li and Huajian Huang and Sai-Kit Yeung and Hui Cheng},
  journal= {arXiv preprint arXiv:2404.03202},
  year   = {2024}
}

备注

8 pages, 6 figures, accepted by WACV 2025, project page: https://liquorleaf.github.io/research/OmniGS/