SpikeGS:通过快速移动类生物传感器重建3D场景
计算机视觉与模式识别
2024-12-25 v4
摘要
3D高斯溅写 (3DGS) 在3D场景重建方面表现卓越,但严重依赖清晰图像。在实际场景中,尤其当相机快速移动时,实现这一要求往往具有挑战性,这严重限制了3DGS的应用。为此,我们提出了Spike高斯溅写 (SpikeGS),这是首个将尖峰流集成到3DGS管道中,通过快速移动类生物相机重建3D场景的框架。借助累积光栅化、间隔监督和专用管道设计,SpikeGS从高时间分辨率但纹理欠缺的尖峰流中提取细节几何和纹理信息,在1秒内重建实拍场景。在多个合成和真实世界数据集上的大量实验表明,SpikeGS在现有基于尖峰和去眩晕3D场景重建方法中具有优势。代码和数据将很快公开。
引用
@article{arxiv.2407.03771,
title = {SpikeGS: Reconstruct 3D scene via fast-moving bio-inspired sensors},
author = {Yijia Guo and Liwen Hu and Yuanxi Bai and Jiawei Yao and Lei Ma and Tiejun Huang},
journal= {arXiv preprint arXiv:2407.03771},
year = {2024}
}
备注
Accepted by AAAI2025