CARING-AI：通过生成式人工智能创作情境感知的增强现实指令
人机交互
2025-01-29 v1
摘要
情境感知的 AR 指令能够实现自适应与原位的学习体验。然而，硬件限制与专业技能要求制约了此类指令的创作。随着生成式人工智能（Gen-AI）的最新进展，当前研究试图通过在 AR 应用中部署 AI 生成内容（AIGC）来解决这些限制。然而，我们对六位 AR 从业者的初步研究表明，当前的 AIGC 缺乏用于适应不同应用场景的情境信息，因此在创作上存在局限。为了利用 GenAI 强大的生成能力来简化 AR 指令的创作同时捕捉情境信息，我们开发了 CARING-AI，这是一个利用 GenAI 创作情境感知的拟人化身指令的 AR 系统。通过在环境中导航，用户自然地提供情境信息，以生成拟人化身动画作为 AR 指令，使其在空间和时间上融入情境。我们基于 AR 指令中 AIGC 的设计空间，展示了 CARING-AI 的三个应用场景：异步指令、远程指令和临时指令。通过两次用户研究（N=12），我们评估了 CARING-AI 的系统可用性，并证明了使用 Gen-AI 进行创作的便捷性与有效性。
引用
@article{arxiv.2501.16557,
title = {CARING-AI: Towards Authoring Context-aware Augmented Reality INstruction through Generative Artificial Intelligence},
author = {Jingyu Shi and Rahul Jain and Seungguen Chi and Hyungjun Doh and Hyunggun Chi and Alexander J. Quinn and Karthik Ramani},
journal= {arXiv preprint arXiv:2501.16557},
year = {2025}
}