中文

我们能信任 AI 生成的教育内容吗?人类与 AI 生成学习资源的比较分析

人机交互 2023-07-04 v2 人工智能

摘要

随着越来越多学生转向提供个性化学习体验的在线学习平台,对高质量教育内容的生产有着巨大需求。大语言模型(LLMs)似乎为大规模快速创建学习材料、减轻教师负担提供了有前景的解决方案。在本研究中,我们通过将 LLM 生成的资源与作为学习者众包活动一部分由学生创建的资资源进行比较,调查了 LLM 在入门编程语境中生成学习资源的潜力。采用盲评方式,学生在最初均获得相同示例后,对 AI 及其同伴生成的资源的正确性与有帮助性进行评分。我们的结果表明,学生感知到的 AI 生成资源质量与其同伴生成的资源质量相当。这表明 AI 生成的资源在某些语境下可作为可行的补充材料。LLM 生成的资源倾向于紧密模仿所给示例,而学生生成的资源在内容长度与所用具体语法特征方面表现出更大多样性。本研究强调了进一步探索不同类型学习资源与更广泛学科领域,以及理解 AI 生成资源对学习成果长期影响的必要性。

关键词

引用

@article{arxiv.2306.10509,
  title  = {Can We Trust AI-Generated Educational Content? Comparative Analysis of Human and AI-Generated Learning Resources},
  author = {Paul Denny and Hassan Khosravi and Arto Hellas and Juho Leinonen and Sami Sarsa},
  journal= {arXiv preprint arXiv:2306.10509},
  year   = {2023}
}