中文

WaveGlove:基于Transformer利用多惯性传感器的手势识别

人机交互 2021-05-06 v1 机器学习 信号处理

摘要

近年来,基于惯性数据的手势识别(HGR)取得了显著发展,其最优方法采用单一手持传感器以及由简单手势构成的词表。本工作探索使用多个惯性传感器的优势。利用WaveGlove——一种以带有五个惯性传感器的手套形式的定制硬件原型,我们采集了两个包含超过1100011000个样本的数据集。为使它们与已有工作可比,将其与另外99个公开数据集一起进行归一化,并随后用于评估一系列机器学习手势识别方法,包括新提出的基于Transformer的架构。我们的结果表明,即便涉及不同手指的复杂手势也能以高准确率识别。在采集数据集上进行的消融研究证明了多传感器的重要性:使用至多三个传感器时性能提升,超过该数量无显著改进。

关键词

引用

@article{arxiv.2105.01753,
  title  = {WaveGlove: Transformer-based hand gesture recognition using multiple inertial sensors},
  author = {Matej Králik and Marek Šuppa},
  journal= {arXiv preprint arXiv:2105.01753},
  year   = {2021}
}

备注

Accepted to EUSIPCO 2021