分析 ChatGPT 在计算机网络工程导论课程中的能力
计算机与社会
2023-04-17 v2 人工智能
摘要
ChatGPT 最近作为能为各类问题生成看似合理且具人类语感的文本回答的工具，引起了公众与学界的关注。ChatGPT 的一个潜在使用或滥用场景是在学术或课堂环境中回答各类问题，甚至生成整篇论文与研究报告。尽管近期工作已探讨 ChatGPT 在人文学科、商学院或医学院背景下的使用，本工作探讨其在计算机网络工程导论课程中的表现。本工作评估了 ChatGPT 在计算机网络工程入门课程中回答测验、作业、考试与实验问题的能力。本工作发现，ChatGPT 在询问通用概念的问题上表现良好。然而，正如预期，作为一个纯文本工具，它无法处理含图表的问题，也无法生成图表。此外同样明显的是，该工具无法进行动手实验、面包板组装等，但能为部分实验手册问题生成看似合理的答案。本工作提出的一个关键观察是，ChatGPT 工具无法被用于通过课程的所有组成部分。尽管如此，它在测验与简答题上表现良好。另一方面，看似合理、具人类语感的答案在生成错误但依然合理的回答时可能误导学生。
引用
@article{arxiv.2304.06122,
title = {Analyzing ChatGPT's Aptitude in an Introductory Computer Engineering Course},
author = {Sanjay Deshpande and Jakub Szefer},
journal= {arXiv preprint arXiv:2304.06122},
year = {2023}
}
备注
5 pages