中文

ARbiter:在增强现实中生成对话选项与通信支持

人机交互 2025-03-10 v1

摘要

在这篇立场论文中,我们提出研究增强现实(AR)与人工智能(AI)的结合以支持对话,其灵感来源于电子游戏中常见的对话系统界面。具备 AR 功能的设备正变得更加强大且外观常规化,如 Snapchat Spectacles、XREAL 眼镜或最近发布的 Meta Orion 等头戴式显示器(HMD)。这一发展减少了可能的工学、外观和运行时问题,从而允许更直接地集成和扩展 AR 在我们的日常生活中的应用,无论是在私人场合还是在工作场所。与此同时,我们可以观察到 AI 开发的巨大增长(CHI 领域亦然)。最近声名鹊起的大语言模型(LLMs),如 OpenAI 的 o3-mini 或 DeepSeek-R1,在维持对话、提供建议和处理复杂主题方面的能力已超越其前代产品(几乎达到实时)。与自然语言处理系统相结合——自然语言处理系统如今是智能手机和类似设备(包括现代 AR-HMD)的标准组件——很容易想象一个集成到日常对话中并提供多种类型辅助的联合系统。这样的系统将为 AR+AI 的研究开辟许多机会,正如 Hirzle 等人所指出的,该领域仍然稀缺。在以下内容中,我们描述了对话式 AR+AI 系统的设计如何从电子游戏对话系统中学习,并提出了可借助这一 AR+AI 组合进行调查的用例和研究问题。

关键词

引用

@article{arxiv.2503.05220,
  title  = {ARbiter: Generating Dialogue Options and Communication Support in Augmented Reality},
  author = {Julián Méndez and Marc Satkowski},
  journal= {arXiv preprint arXiv:2503.05220},
  year   = {2025}
}

备注

This work has been accepted for the ACM CHI 2025 Workshop "Everyday AR through AI-in-the-Loop" (see https://xr-and-ai.github.io/)