中文

Fast3R:单次前向传递实现 1000+ 图像的 3D 重建

计算机视觉与模式识别 2025-03-21 v2 人工智能 图形学 机器人学

摘要

多视角 3D 重建是计算机视觉中的核心挑战,尤其是在需要跨越不同视角的准确且可扩展表示的应用中。当前领先方法如 DUSt3R 采用根本性的两两方法处理图像, necessitating 对图像成对处理,并需要高昂的全局对齐程序才能从多个视角重建。本文提出 Fast 3D 重建(Fast3R),是 DUSt3R 的一种新型多视角泛化方案,通过并行处理大量视角实现高效且可扩展的 3D 重建。Fast3R 的基于 Transformer 的架构在单次前向传递中处理 N 张图像,绕过迭代对齐的需求。通过对相机姿态估计和 3D 重建进行大量实验,Fast3R 表现出领先的性能,在推理速度和误差积累方面实现显著改进。这些结果将 Fast3R 确立为多视角应用的稳健替代方案,提供了在不牺牲重建精度的前提下提升的可扩展性。

关键词

引用

@article{arxiv.2501.13928,
  title  = {Fast3R: Towards 3D Reconstruction of 1000+ Images in One Forward Pass},
  author = {Jianing Yang and Alexander Sax and Kevin J. Liang and Mikael Henaff and Hao Tang and Ang Cao and Joyce Chai and Franziska Meier and Matt Feiszli},
  journal= {arXiv preprint arXiv:2501.13928},
  year   = {2025}
}

备注

CVPR 2025. Project website: https://fast3r-3d.github.io/