CobotAR:基于全向投影图像与DNN手势识别的机器人交互
机器人学
2023-05-05 v1
摘要
过去几年中,若干技术解决方案支持了用于增强现实(AR)多用户协作的接口创建。然而,这些技术需要使用可穿戴设备。我们提出CobotAR——一种基于深度神经网络(DNN)手势识别实现人机交互(HRI)的新型AR技术——用户无需额外的可穿戴设备。该系统允许用户仅用双手即可获得更直观的机器人应用体验。CobotAR系统假定由安装在6自由度机器人上的移动投影仪创建AR空间显示。所提出的技术提供了一种新颖的人机交互方式,通过机器人投影系统和基于DNN的算法实现安全、直观和沉浸式的控制。我们在本研究中进行了一项包含若干参数评估的实验,使用户能够界定新方法的优缺点。CobotAR系统的心理需求是无线游戏手柄的一半,比示教器低16%。
引用
@article{arxiv.2110.10571,
title = {CobotAR: Interaction with Robots using Omnidirectionally Projected Image and DNN-based Gesture Recognition},
author = {Nazarova Elena and Sautenkov Oleg and Altamirano Cabrera Miguel and Tirado Jonathan and Serpiva Valerii and Rakhmatulin Viktor and Tsetserukou Dzmitry},
journal= {arXiv preprint arXiv:2110.10571},
year = {2023}
}
备注
Accepted paper in SMC conference 2021, IEEE copyright