中文

TeethTap:基于耳戴设备运动与声学传感识别离散牙齿手势

人机交互 2021-02-26 v1

摘要

牙齿手势因不同场景与无障碍需求成为一种替代输入方式。本文提出TeethTap,一种新颖的免视免手输入技术,可识别多达13种离散牙齿敲击手势。TeethTap采用可穿戴3D打印耳戴设备,双耳后各置一个IMU传感器与接触式麦克风,协同分别检测下颌运动与声音数据。TeethTap使用支持向量机融合声学与运动数据从噪声中分类手势,并采用带动态时间规整(DTW)距离度量的K近邻(KNN)利用运动数据进行手势分类。一项有11名参与者的用户研究表明,TeethTap在实验室环境下以90.9%的实时分类准确率识别13种手势。我们进一步揭示了单耳与双耳佩戴传感器时不同牙齿手势的准确率差异。此外,我们探究了真实环境(包括进食、说话、行走与跳跃)下的激活手势。基于我们的发现,进一步讨论了将TeethTap集成至未来设备的潜在应用与实用挑战。

关键词

引用

@article{arxiv.2102.12548,
  title  = {TeethTap: Recognizing Discrete Teeth Gestures Using Motion and Acoustic Sensing on an Earpiece},
  author = {Wei Sun and Franklin Mingzhe Li and Benjamin Steeper and Songlin Xu and Feng Tian and Cheng Zhang},
  journal= {arXiv preprint arXiv:2102.12548},
  year   = {2021}
}

备注

26th International Conference on Intelligent User Interfaces (IUI '21), April 14--17, 2021, College Station, TX, USA