RetAssist：在故事复述练习中利用生成图像辅助词汇学习者
人机交互
2024-05-27 v1
摘要
阅读并反复复述短篇故事是学习目标词含义和用法的常见且有效的方法。然而，学习者常常在理解、回忆和复述这些目标词的故事上下文方面遇到困难。受多媒体学习认知理论的启发，我们提出了一种计算工作流，用于生成与故事配对的关联图像。基于该工作流，我们与学习者和教师合作，迭代设计了一个名为RetAssist的交互式词汇学习系统。它可以生成故事的句子级图像，以促进在故事复述练习中对目标词的理解和回忆。我们的受试者内研究（N=24）表明，与没有生成图像的基线系统相比，RetAssist显著提高了学习者使用目标词表达的流畅性。参与者还认为RetAssist减轻了他们的学习负担，并且更有用。我们讨论了利用文本到图像生成模型支持学习任务的见解。
引用
@article{arxiv.2405.14794,
title = {RetAssist: Facilitating Vocabulary Learners with Generative Images in Story Retelling Practices},
author = {Qiaoyi Chen and Siyu Liu and Kaihui Huang and Xingbo Wang and Xiaojuan Ma and Junkai Zhu and Zhenhui Peng},
journal= {arXiv preprint arXiv:2405.14794},
year = {2024}
}