中文

SpikeGS:通过快速移动类生物传感器重建3D场景

计算机视觉与模式识别 2024-12-25 v4

摘要

3D高斯溅写 (3DGS) 在3D场景重建方面表现卓越,但严重依赖清晰图像。在实际场景中,尤其当相机快速移动时,实现这一要求往往具有挑战性,这严重限制了3DGS的应用。为此,我们提出了Spike高斯溅写 (SpikeGS),这是首个将尖峰流集成到3DGS管道中,通过快速移动类生物相机重建3D场景的框架。借助累积光栅化、间隔监督和专用管道设计,SpikeGS从高时间分辨率但纹理欠缺的尖峰流中提取细节几何和纹理信息,在1秒内重建实拍场景。在多个合成和真实世界数据集上的大量实验表明,SpikeGS在现有基于尖峰和去眩晕3D场景重建方法中具有优势。代码和数据将很快公开。

关键词

引用

@article{arxiv.2407.03771,
  title  = {SpikeGS: Reconstruct 3D scene via fast-moving bio-inspired sensors},
  author = {Yijia Guo and Liwen Hu and Yuanxi Bai and Jiawei Yao and Lei Ma and Tiejun Huang},
  journal= {arXiv preprint arXiv:2407.03771},
  year   = {2024}
}

备注

Accepted by AAAI2025