中文

ConversAR:探索面向第二语言学习者的增强现实中具身 LLM 驱动的群组对话

人机交互 2025-06-02 v1

摘要

群组对话对第二语言(L2)学习者很有价值,因为它提供了练习听力和口语、运用复杂话轮转换技能以及体验目标语言中群体社会动态的机会。然而,大多数现有的基于增强现实(AR)的对话学习工具侧重于双人交互,而非群组对话。尽管研究表明,AR 可以帮助减少说话焦虑,并在双人场景中创造一个练习口语技能的舒适空间,特别是使用基于大语言模型(LLM)的对话代理时,但使用这些技术进行群组语言练习的潜力在很大程度上仍未被探索。我们引入了 ConversAR,一个由 gpt-4o 驱动的 AR 应用程序,使 L2 学习者能够练习情境化的群组对话。我们的系统具有两个具身 LLM 代理,具备基于视觉的场景理解和实时字幕功能。在一项有 10 名参与者参与的系统评估中,用户报告称,与其他学习者面对面练习的方法相比,他们的说话焦虑有所减轻,学习者自主性有所增强。

关键词

引用

@article{arxiv.2505.24000,
  title  = {ConversAR: Exploring Embodied LLM-Powered Group Conversations in Augmented Reality for Second Language Learners},
  author = {Jad Bendarkawi and Ashley Ponce and Sean Mata and Aminah Aliu and Yuhan Liu and Lei Zhang and Amna Liaqat and Varun Nagaraj Rao and Andrés Monroy-Hernández},
  journal= {arXiv preprint arXiv:2505.24000},
  year   = {2025}
}

备注

Published in Proceedings of the Extended Abstracts of the CHI Conference on Human Factors in Computing Systems