中文

GRLib:一个开源的手势检测与识别 Python 库

计算机视觉与模式识别 2023-10-24 v1

摘要

手势识别系统为人类与计算机系统交互提供了一种自然的方式。尽管已为该任务设计了多种算法,诸多外部条件(如光照不足或与相机距离过远)使得难以创建在多种环境下均表现良好的算法。本工作中,我们提出 GRLib:一个能够检测并分类静态与动态手势的开源 Python 库。此外,该库可在已有数据上训练以提升分类鲁棒性。所提出的方案利用来自 RGB 相机的视频流。获取的帧随后进行数据增强并传入 MediaPipe Hands 以执行手部关键点检测。然后将关键点分类至各自的手势类别。该库通过轨迹和关键帧提取支持动态手势。研究发现,在三个不同的真实世界数据集上,该库优于另一公开可用的 HGR(手势识别)系统——MediaPipe Solutions。该库可在 https://github.com/mikhail-vlasenko/grlib 获取,并可通过 pip 安装。

关键词

引用

@article{arxiv.2310.14919,
  title  = {GRLib: An Open-Source Hand Gesture Detection and Recognition Python Library},
  author = {Jan Warchocki and Mikhail Vlasenko and Yke Bauke Eisma},
  journal= {arXiv preprint arXiv:2310.14919},
  year   = {2023}
}