赋能儿童创建 AI 增强的增强现实体验
人机交互
2025-08-13 v1 人工智能
图形学
编程语言
摘要
尽管 AI 增强的 AR 技术有潜力提升儿童的学习体验，但其主要应用方式仍将儿童定位为消费者而非创造者。我们推出了 Capybara，一个基于 AR 和 AI 驱动的可视化编程环境，赋能儿童创建、定制和编程叠加在物理世界上的 3D 角色。Capybara 使儿童能够使用文本到 3D 的生成式 AI 模型创建虚拟角色和配饰，并通过自动绑定和身体追踪来驱动这些角色。此外，我们的系统采用基于视觉的 AI 模型来识别物理对象，允许儿童编程虚拟角色与其物理环境之间的交互行为。我们通过一组新颖的 AR 体验展示了 Capybara 的表现力。我们对美国和阿根廷的 20 名儿童进行了用户研究。我们的发现表明，Capybara 能够赋能儿童利用 AI 创作个性化且引人入胜的 AR 体验，无缝连接虚拟与物理世界。
引用
@article{arxiv.2508.08467,
title = {Empowering Children to Create AI-Enabled Augmented Reality Experiences},
author = {Lei Zhang and Shuyao Zhou and Amna Liaqat and Tinney Mak and Brian Berengard and Emily Qian and Andrés Monroy-Hernández},
journal= {arXiv preprint arXiv:2508.08467},
year = {2025}
}
备注
Accepted to ACM UIST 2025