中文

利用BEV表示进行360度视觉位置识别

计算机视觉与模式识别 2023-05-24 v1 机器人学

摘要

本文研究了在360度视觉位置识别(VPR)中使用鸟瞰图(BEV)表示的优势。我们提出了一种新颖的网络架构,在特征提取、特征聚合与视觉-激光雷达融合中利用BEV表示,从而桥接视觉线索与空间感知。我们的方法使用标准卷积网络提取图像特征,并根据预定义的3D网格空间点组合特征。为缓解相机间机械与时间上的错位,我们进一步引入可变形注意力以学习补偿。基于BEV特征表示,我们随后采用极坐标变换与离散傅里叶变换进行聚合,已被证明具有旋转不变性。此外,图像与点云线索可易于表述于同一坐标系中,有利于传感器融合用于位置识别。所提出的基于BEV的方法在两个数据集(包括上路与越野场景)上进行了消融与对比研究评估。实验结果验证了BEV因其优于基线方法的性能而有益于VPR的假设。据我们所知,这是在该任务中首次尝试采用BEV表示。

关键词

引用

@article{arxiv.2305.13814,
  title  = {Leveraging BEV Representation for 360-degree Visual Place Recognition},
  author = {Xuecheng Xu and Yanmei Jiao and Sha Lu and Xiaqing Ding and Rong Xiong and Yue Wang},
  journal= {arXiv preprint arXiv:2305.13814},
  year   = {2023}
}