局部球谐函数改善基于骨架的手部动作识别
计算机视觉与模式识别
2025-02-05 v2
摘要
手部动作识别至关重要。通信、人机交互与手势控制均依赖于此。基于骨架的动作识别传统上包含手部，而手部属于迄今仍难以正确识别的类别。我们提出一种专为手部动作识别设计的方法，利用相对角度嵌入与局部球谐函数创建新颖的手部表示。球谐函数的使用创建了旋转不变表示，使手部动作识别对受试者间差异与视角变化更为鲁棒。我们在带有RGB-D视频与3D手部姿态标注的第一人称手部动作基准以及NTU RGB+D 120数据集上对手部关节进行了大量实验，证明了使用局部球谐函数表示的优势。我们的代码可在 https://github.com/KathPra/LSHR_LSHT 获取。
引用
@article{arxiv.2308.10557,
title = {Local Spherical Harmonics Improve Skeleton-Based Hand Action Recognition},
author = {Katharina Prasse and Steffen Jung and Yuxuan Zhou and Margret Keuper},
journal= {arXiv preprint arXiv:2308.10557},
year = {2025}
}