ChatGPT 作为用西班牙语编写的编程考试的解答器与评分器
人工智能
2025-03-21 v2
摘要
评估大型语言模型 (LLM) 在教育任务中为老师和学生提供帮助的能力正受到日益关注的注意。本文评估了 ChatGPT 在解决和评分由 accredited BSc 计算机科学学位考试提供的真实编程考试方面的能力，其内容以西班牙语编写。我们的发现表明，该 AI 模型仅对解决简单编码任务有效。其在解决复杂问题或评估他人所著解答方面的熟练程度远远不足。作为本研究的一部分，我们也发布了一个新的编程任务语料库以及相应的用于解决问题或评估解答的提示。该资源可被其他研究团队进一步利用。
引用
@article{arxiv.2409.15112,
title = {ChatGPT as a Solver and Grader of Programming Exams written in Spanish},
author = {Pablo Saborido-Fernández and Marcos Fernández-Pichel and David E. Losada},
journal= {arXiv preprint arXiv:2409.15112},
year = {2025}
}