与学习分析仪表盘对话：生成式AI素养对学习者与常规式与支架式聊天机器人互动的影响
人机交互
2024-11-26 v1
摘要
学习分析仪表盘（LAD）将复杂学习者数据简化为可访问的可视化形式，为教育者和学习者提供可操作的见解。然而，这些工具的教育效果一直未能匹配背后技术的 sophistication。受生成式AI（GenAI）聊天机器人增强的解释性和互动式LAD，具有通过文本实现与数据可视化的动态、对话式交互并提供个性化反馈的潜力。然而，这些工具的有效性可能受到学习者不同水平的GenAI素养的限制，而这一因素在当前研究中仍未得到充分探讨。本研究 investigates GenAI素养在学习者与常规（反应式） versus 支架式（主动式）聊天机器人协助的LAD互动中的作用。通过对81名参与者进行比较分析，我们检验了GenAI素养是否与学习者解读复杂可视化的能力及其在与聊天机器人协助LAD互动期间的认知过程相关。结果显示，尽管两种聊天机器人均显著提升了学习者的理解力，但GenAI素养更高的学习者受益最大，尤其是针对常规聊天机器人，表现出多样化的 prompting strategy。我们的发现凸显了在LAD和教育技术中集成GenAI聊天机器人时，必须考虑学习者的GenAI素养的重要性。将支架技术纳入GenAI聊天机器人中是一个有效策略，提供更引导性的体验，减轻对学习者GenAI素养的依赖。
引用
@article{arxiv.2411.15597,
title = {Chatting with a Learning Analytics Dashboard: The Role of Generative AI Literacy on Learner Interaction with Conventional and Scaffolding Chatbots},
author = {Yueqiao Jin and Kaixun Yang and Lixiang Yan and Vanessa Echeverria and Linxuan Zhao and Riordan Alfredo and Mikaela Milesi and Jie Fan and Xinyu Li and Dragan Gašević and Roberto Martinez-Maldonado},
journal= {arXiv preprint arXiv:2411.15597},
year = {2024}
}