中文

面向稀疏点云的 3D 孪生体素到 BEV 跟踪器

计算机视觉与模式识别 2021-11-18 v2

摘要

点云中的 3D 目标跟踪由于动态环境中 LiDAR 点的稀疏性仍具挑战性。本文中,我们提出一种孪生体素到 BEV 跟踪器,可显著提升稀疏 3D 点云中的跟踪性能。具体而言,其由一个孪生形状感知特征学习网络和一个体素到 BEV 目标定位网络组成。孪生形状感知特征学习网络可捕获目标的 3D 形状信息以学习目标的判别性特征,从而能从稀疏点云背景中辨识潜在目标。为此,我们首先进行模板特征嵌入将模板特征嵌入潜在目标,然后生成稠密 3D 形状以刻画潜在目标的形状信息。为定位被跟踪目标,体素到 BEV 目标定位网络以无锚方式从稠密鸟瞰图(BEV)特征图回归目标的 2D 中心与 zz 轴中心。具体地,我们通过最大池化沿 zz 轴压缩体素化点云以获得稠密 BEV 特征图,从而可更有效地回归 2D 中心与 zz 轴中心。在 KITTI 与 nuScenes 数据集上的大量评估表明,我们的方法以较大优势显著优于当前最先进方法。

关键词

引用

@article{arxiv.2111.04426,
  title  = {3D Siamese Voxel-to-BEV Tracker for Sparse Point Clouds},
  author = {Le Hui and Lingpeng Wang and Mingmei Cheng and Jin Xie and Jian Yang},
  journal= {arXiv preprint arXiv:2111.04426},
  year   = {2021}
}

备注

Accepted by NeurIPS 2021