我们还有多远?生成式AI在学习软件工程中的胜利与挑战
软件工程
2024-03-06 v1 人机交互
摘要
会话式生成式AI(convo-genAI)正引发软件工程(SE)的革命,工程师和学者正将其应用于工作中。然而,对于该技术目前的潜力与缺陷,特别是在辅助学生完成SE任务方面,仍存在认知空白。在本研究中,我们通过一项被试间研究(N=22)评估了ChatGPT(一种convo-genAI平台)在辅助学生完成SE任务时的有效性。研究发现,与使用传统资源相比,参与者在生产力或自我效能感方面不存在统计学差异,但其挫败感显著增加。研究还揭示了5种因违反人机交互准则而产生的不同错误,这些错误给参与者导致了7种不同的负面后果。
引用
@article{arxiv.2312.11719,
title = {How Far Are We? The Triumphs and Trials of Generative AI in Learning Software Engineering},
author = {Rudrajit Choudhuri and Dylan Liu and Igor Steinmacher and Marco Gerosa and Anita Sarma},
journal= {arXiv preprint arXiv:2312.11719},
year = {2024}
}
备注
13 pages, ICSE 2024