鱼眼图像下的3D高斯泼溅：视场角分析与基于深度的初始化
计算机视觉与模式识别
2026-03-10 v2 图形学
摘要
我们首次评估了3D高斯泼溅方法在视场角超过180°的真实鱼眼图像上的表现。我们的研究在200°鱼眼相机拍摄的室内和室外场景上评估了Fisheye-GS和3DGUT，旨在评估在严重畸变下进行广角重建的实用性。通过比较200°、160°和120°视场角下的重建结果，我们发现两种方法均在160°时达到最佳效果，该视场角平衡了场景覆盖与图像质量，而200°时的畸变会降低性能。为了解决运动恢复结构（SfM）初始化在如此广角下常见的失败问题，我们引入了一种基于深度的替代方案，使用UniK3D（通用相机单目3D估计）。这代表了UniK3D在超过200°的鱼眼图像上的首次应用，尽管该模型并未在此类数据上进行训练。为了公平起见，我们将预测点的数量控制在与SfM相当的水平，UniK3D生成了几何上精确的重建，其效果可与SfM媲美甚至超越，即使在有雾、眩光或开阔天空等具有挑战性的场景中也是如此。这些结果证明了基于鱼眼的3D高斯泼溅的可行性，并为未来从稀疏和畸变输入进行广角重建的研究提供了基准。
引用
@article{arxiv.2508.06968,
title = {3D Gaussian Splatting with Fisheye Images: Field of View Analysis and Depth-Based Initialization},
author = {Ulas Gunes and Matias Turkulainen and Mikhail Silaev and Juho Kannala and Esa Rahtu},
journal= {arXiv preprint arXiv:2508.06968},
year = {2026}
}
备注
VISAPP 2026 Accepted Camera Ready Version