中文

有损通信下的车车协同感知学习

计算机视觉与模式识别 2023-03-23 v2 人工智能 机器学习

摘要

深度学习已广泛应用于智能车辆驾驶的感知(例如 3D 目标检测)中。得益于有益的 Vehicle-to-Vehicle (V2V) 通信,来自其他智能体的深度学习特征可以共享给本车,从而提升本车的感知能力。这在 V2V 研究中被称为协同感知,其算法近期已取得显著进展。然而,所有现有的协同感知算法均假设 V2V 通信是理想的,未考虑复杂真实驾驶场景中常见的有损通信(LC)可能导致的共享特征有损问题。在本文中,我们首先研究了有损通信在 V2V 协同感知中产生的副作用(例如检测性能下降),然后提出了一种新颖的中间层 LC 感知特征融合方法,通过 LC 感知修复网络(LCRN)来减轻有损通信的副作用,并通过专门设计的 V2V 注意力模块(V2VAM)增强本车与其他车辆之间的交互,该模块包括本车的车内注意力以及不确定性感知的车间注意力。在公共协同感知数据集 OPV2V(基于数字孪生 CARLA 模拟器)上的大量实验表明,所提出的方法在有损 V2V 通信下的协同点云 3D 目标检测中非常有效。

关键词

引用

@article{arxiv.2212.08273,
  title  = {Learning for Vehicle-to-Vehicle Cooperative Perception under Lossy Communication},
  author = {Jinlong Li and Runsheng Xu and Xinyu Liu and Jin Ma and Zicheng Chi and Jiaqi Ma and Hongkai Yu},
  journal= {arXiv preprint arXiv:2212.08273},
  year   = {2023}
}

备注

this paper was accepted by IEEE Transactions on Intelligent Vehicles