MMW-Carry：通过毫米波雷达-相机融合增强携带物体检测

本文介绍了MMW-Carry，一个旨在利用毫米波雷达信号并辅以相机输入来预测个体携带各种物体概率的系统。MMW-Carry的主要目标是提供一种快速且成本效益高的初步筛查解决方案，特别适用于非超敏感场景。总体而言，MMW-Carry在两个关键方面取得了显著进展。首先，它解决了由多径反射引起的复杂室内环境中的定位挑战，增强了系统的整体鲁棒性。这是通过集成基于相机的人体检测、跟踪以及雷达-相机平面变换来获取受试者的空间占用区域，随后对雷达图像进行放大操作来实现的。其次，通过利用对受试者的长期观察来提升系统性能。这是通过智能融合来自运动轨迹中受试者及其携带物体的多个不同视角雷达图像的神经网络结果来实现的，并借助所提出的知识迁移模块。我们的实验结果表明，对于在大型室内空间中随机移动、以公开携带或隐蔽方式携带日常常见物体的个体，MMW-Carry检测物体的平均假阳性率为25.22%，漏检率为21.71%。这些发现证实了MMW-Carry在扩展其能力以检测更广泛物体用于多样化应用方面的潜力。