懒学生的梦想:ChatGPT 独立通过工程学课程
计算机与社会
2025-05-19 v4 人工智能
摘要
本文对大型语言模型(LLM)成功完成一学期本科生控制系统课程的能力进行了全面调查。通过对 115 项课程交付物的评估,我们在模拟真实学生使用模式的“最小努力”协议下,使用 ChatGPT 评估了 LLM 的表现。调查在多种评估形式中采用了严格的测试方法,从自动评分的多项选择题到复杂的 Python 编程任务和长篇分析写作。我们的分析为 AI 在处理数学公式、编程挑战和控制系统工程理论概念方面的优势与局限性提供了定量见解。该 LLM 取得了 B 级成绩(82.24%),接近但未超过班级平均分(84.99%),在结构化作业中表现最佳,在开放式项目中局限性最大。研究结果为响应 AI 进步的课程设计调整提供了参考,促使从简单的禁止转向在工程教育中深思熟虑地整合这些工具。包括教学大纲、考试试卷、设计项目和示例回复在内的补充材料可在项目网站找到:https://gradegpt.github.io。
引用
@article{arxiv.2503.05760,
title = {The Lazy Student's Dream: ChatGPT Passing an Engineering Course on Its Own},
author = {Gokul Puthumanaillam and Timothy Bretl and Melkior Ornik},
journal= {arXiv preprint arXiv:2503.05760},
year = {2025}
}