中文

CobotAR:基于全向投影图像与DNN手势识别的机器人交互

机器人学 2023-05-05 v1

摘要

过去几年中,若干技术解决方案支持了用于增强现实(AR)多用户协作的接口创建。然而,这些技术需要使用可穿戴设备。我们提出CobotAR——一种基于深度神经网络(DNN)手势识别实现人机交互(HRI)的新型AR技术——用户无需额外的可穿戴设备。该系统允许用户仅用双手即可获得更直观的机器人应用体验。CobotAR系统假定由安装在6自由度机器人上的移动投影仪创建AR空间显示。所提出的技术提供了一种新颖的人机交互方式,通过机器人投影系统和基于DNN的算法实现安全、直观和沉浸式的控制。我们在本研究中进行了一项包含若干参数评估的实验,使用户能够界定新方法的优缺点。CobotAR系统的心理需求是无线游戏手柄的一半,比示教器低16%。

关键词

引用

@article{arxiv.2110.10571,
  title  = {CobotAR: Interaction with Robots using Omnidirectionally Projected Image and DNN-based Gesture Recognition},
  author = {Nazarova Elena and Sautenkov Oleg and Altamirano Cabrera Miguel and Tirado Jonathan and Serpiva Valerii and Rakhmatulin Viktor and Tsetserukou Dzmitry},
  journal= {arXiv preprint arXiv:2110.10571},
  year   = {2023}
}

备注

Accepted paper in SMC conference 2021, IEEE copyright