LiCAF: 用于行走姿态识别的激光雷达-摄像机非对称融合
计算机视觉与模式识别
2024-06-19 v1
摘要
行走姿态识别是一种通过行走模式识别个人身份的生物识别技术。由于多模态融合在行走姿态识别方面的显著成就，我们考虑采用激光雷达-摄像机融合以获得稳健的行走姿态表示。然而，现有方法常常忽视了各模态的内在特征，缺乏细粒度的融合和时序建模。本文引入一种新颖的模态敏感网络LiCAF，用于激光雷达-摄像机融合，采用非对称建模策略。具体而言，我们提出了非对称跨模态通道注意力（Asymmetric Cross-modal Channel Attention, ACCA）和交错跨模态时序建模（Interlaced Cross-modal Temporal Modeling, ICTM），用于跨模态有价值通道信息的选择和强大的时序建模。我们的方法在SUSTech1K数据集上实现了最先进的性能（Rank-1为93.9%，Rank-5为98.8%），证明了其有效性。
关键词
引用
@article{arxiv.2406.12355,
title = {LiCAF: LiDAR-Camera Asymmetric Fusion for Gait Recognition},
author = {Yunze Deng and Haijun Xiong and Bin Feng},
journal= {arXiv preprint arXiv:2406.12355},
year = {2024}
}
备注
Accepted by ICIP2024