中文

ARDIE:用于人机协作的增强现实、对话与眼动策略

机器人学 2023-05-09 v1

摘要

人机协作(HRC)在工业、家庭和商业环境中正变得日益重要。然而,此类协作的有效性高度依赖于人与机器人对环境的态势感知。改善这种感知不仅包括在对共享工作空间中的感知进行对齐,还包括双向沟通意图并可视化环境的不同状态以增强场景理解。在本文中,我们提出 ARDIE(Augmented Reality with Dialogue and Eye Gaze,结合对话与眼动的增强现实),一种利用多模态反馈线索来增强人机协作的新型智能体。我们的系统利用决策理论框架来制定一个联合策略,该策略结合了交互式增强现实(AR)、自然语言和眼动,以描绘环境当前和未来的状态。通过针对特定物体的 AR 渲染,人类可以可视化未来的物体交互以便按需调整,最终提供人与机器人之间交互式且高效的协作。

关键词

引用

@article{arxiv.2305.04685,
  title  = {ARDIE: AR, Dialogue, and Eye Gaze Policies for Human-Robot Collaboration},
  author = {Chelsea Zou and Kishan Chandan and Yan Ding and Shiqi Zhang},
  journal= {arXiv preprint arXiv:2305.04685},
  year   = {2023}
}