生成式 AI 对科学学习结果负面影响的实验证据
计算机与社会
2023-11-13 v1 人工智能
计算与语言
摘要
在本研究中，我以实验方法探究生成式 AI 对学术阅读材料学习效能的影响。受过大学教育的参与者进行三轮阅读与写作任务。每轮后，他们回答与材料相关的理解问题。在调整背景知识与人口统计因素后，写作任务完全依赖 AI 导致准确率降低 25.1%。相反，AI 辅助阅读导致下降 12%。有趣的是，使用 AI 做摘要显著提升了质量与产出。准确率在 AI 辅助部分呈现显著方差。进一步分析揭示，具备阅读主题扎实背景与更优读写技能者获益最多。我于文末讨论教育政策意涵作结，强调教育者须警示学生过度依赖 AI 之危，并就其于教育场景的最优使用提供指引之必要。
引用
@article{arxiv.2311.05629,
title = {Experimental Evidence on Negative Impact of Generative AI on Scientific Learning Outcomes},
author = {Qirui Ju},
journal= {arXiv preprint arXiv:2311.05629},
year = {2023}
}
备注
Pilot Working Paper