作为 ViT 相对位姿预测归纳偏置的八点算法
计算机视觉与模式识别
2023-01-25 v2
摘要
我们提出了一个用于直接估计两幅图像之间相对位姿（旋转与平移，含尺度）的简单基线。深度方法近期取得了显著进展，但往往需要复杂或多阶段的架构。我们表明，对视觉 Transformer (ViT) 施加少量修改即可使其计算接近于八点算法 (Eight-Point Algorithm)。这种归纳偏置使得一个简单方法在多种设定下具有竞争力，在有限数据条件下常大幅超越当前最优方法并取得强劲性能提升。
引用
@article{arxiv.2208.08988,
title = {The 8-Point Algorithm as an Inductive Bias for Relative Pose Prediction by ViTs},
author = {Chris Rockwell and Justin Johnson and David F. Fouhey},
journal= {arXiv preprint arXiv:2208.08988},
year = {2023}
}
备注
Accepted to 3DV 2022; Project Page: https://crockwell.github.io/rel_pose/ Revision: Fixed Epipolar Lines in Figure 3, Figure 10