中文

基于RGB-D相机的指向手势识别与定位

人机交互 2020-01-14 v1 机器人学 信号处理

摘要

非语言交流是我们日常对话的一部分,多种手势被用于信息交换。其中,指向是最重要的一类手势。若此类手势无法被其他团队成员感知,例如盲人与视障人士(BVIP),他们将缺失重要信息且难以参与活跃的协作流程。因此,本文描述一种用于检测此类指向手势的系统,以为BVIP提供适宜输出模态的输入。我们的系统采用RGB-D相机来识别用户做出的指向手势,并定位指向目标(例如位于公共工作台上)。我们通过一项有26名用户参与的实验研究对该系统进行了评估。结果表明,对于2×3矩阵,系统使用左臂与右臂的成功率分别为89.59%与79.92%;对于3×4矩阵,使用左臂与右臂的成功率分别为73.57%与68.99%。

关键词

引用

@article{arxiv.2001.03687,
  title  = {Recognition and Localisation of Pointing Gestures using a RGB-D Camera},
  author = {Naina Dhingra and Eugenio Valli and Andreas Kunz},
  journal= {arXiv preprint arXiv:2001.03687},
  year   = {2020}
}

备注

8 pages, 5 figures