基于数据增强和时空注意力的在线微动作识别
计算机视觉与模式识别
2025-08-27 v2
摘要
本文介绍了我们团队最新开发的解决方案——HFUT-VUT——用于IJCAI 2025 MiGA挑战中微动作在线识别赛道的最新方案。微动作在线识别任务是一个极具挑战性的问题,旨在定位多个微动作实例在未裁剪视频中的时间位置并识别其类别。与传统的时间动作检测不同,该任务更强调区分微动作类别并精确识别每个实例的起始和结束时间。此外,微动作通常是自发的人类动作,与其他人类动作相比差异更大。为应对这些挑战,我们提出了手工制作的数据增强和时空注意力,以增强模型对微动作进行更准确分类和定位的能力。我们的解决方案实现了38.03的F1分数,超越了前一时代SOTA的37.9。因此,我们的方法在微动作在线识别赛道中获得了第一名。
关键词
引用
@article{arxiv.2507.09512,
title = {Online Micro-gesture Recognition Using Data Augmentation and Spatial-Temporal Attention},
author = {Pengyu Liu and Kun Li and Fei Wang and Yanyan Wei and Junhui She and Dan Guo},
journal= {arXiv preprint arXiv:2507.09512},
year = {2025}
}
备注
11 pages, 4 figures