中文

HybridGait: 基于混合探索的时空换装步态识别基准

计算机视觉与模式识别 2024-01-02 v1

摘要

现有的步态识别基准大多包含实验室环境中的轻微服装变化,但缺乏随时间与空间持续的外观变化。本文提出首个野外换装步态识别基准CCGait,包含多样的服装变化、室内外场景以及跨越92天的多模态统计数据。为了进一步解决服装和视角变化的耦合效应,我们提出混合方法HybridGait,利用时间动态和3D人体网格的投影2D信息。具体地,我们引入规范对齐时空Transformer (CA-STT)模块来编码人体关节位置感知特征,并通过轮廓引导变形与3D-2D外观投影 (SilD)策略充分利用3D密集先验。我们的贡献有两方面:提供了具有挑战性的基准CCGait,捕捉了扩展时空上的真实外观变化;提出了混合框架HybridGait,在CCGait和Gait3D基准上优于先前工作。我们的项目页面位于https://github.com/HCVLab/HybridGait。

关键词

引用

@article{arxiv.2401.00271,
  title  = {HybridGait: A Benchmark for Spatial-Temporal Cloth-Changing Gait Recognition with Hybrid Explorations},
  author = {Yilan Dong and Chunlin Yu and Ruiyang Ha and Ye Shi and Yuexin Ma and Lan Xu and Yanwei Fu and Jingya Wang},
  journal= {arXiv preprint arXiv:2401.00271},
  year   = {2024}
}