LightFC-X：用于RGB-X跟踪的轻量卷积跟踪器
计算机视觉与模式识别
2025-02-26 v1
摘要
尽管多模态跟踪取得了巨大进展，但这些跟踪器对资源受限设备来说仍然过于沉重和昂贵。为了缓解这一问题，我们提出了LightFC-X，一个轻量卷积RGB-X跟踪器家族，探索了用于轻量多模态跟踪的统一卷积架构。我们的核心思想是实现轻量跨模态建模以及目标多模态特征和时空外观特征的联合细化。具体而言，我们提出了一种新型高效跨注意力模块(ECAM)和一种新型时空模板聚合模块(STAM)。ECAM仅用0.08M参数实现了模板-搜索区域集成特征的轻量跨模态交互。STAM通过模块微调范式增强了模型对时间信息的利用。全面的实验表明我们的LightFC-X实现了最先进的性能，并在参数、性能和速度之间达到了最优平衡。例如，LightFC-T-ST在LasHeR基准测试中相比CMD在SR和PR上分别提升了4.3%和5.7%，实现了2.6倍的参数减少和2.7倍的速度提升。它在CPU上以22 fps的速度实时运行。代码可在https://github.com/LiYunfengLYF/LightFC-X获取。
引用
@article{arxiv.2502.18143,
title = {LightFC-X: Lightweight Convolutional Tracker for RGB-X Tracking},
author = {Yunfeng Li and Bo Wang and Ye Li},
journal= {arXiv preprint arXiv:2502.18143},
year = {2025}
}