由你更好，胜我一等：ChatGPT-3 作为学生论文写作辅助工具
人工智能
2023-11-01 v2 计算机与社会
人机交互
摘要
目的：比较学生在有或无 ChatGPT-3 作为写作辅助工具情况下的论文写作表现。材料与方法：18 名学生参与本研究（对照组 9 名，使用 ChatGPT-3 的实验组 9 名）。我们以等级（A-D）及相应数值（4-1）对论文要素评分。我们比较了论文分数与学生 GPT 使用、写作时间、真实性与内容相似度。结果：两组平均等级均为 C；对照组为 2.39（SD=0.71），实验组为 2.00（SD=0.73）。各预测变量均未影响论文分数：组别（P=0.184）、写作时长（P=0.669）、模块（P=0.388）与 GPA（P=0.532）。实验组的文本非真实性略高（11.87%，SD=13.45 对比 9.96%，SD=9.81%），但整体样本中论文间相似度普遍较低（Jaccard 相似度指数介于 0 至 0.054）。实验组中，AI 分类器识别出更多潜在的 AI 生成文本。结论：本研究未发现使用 GPT 作为写作工具可提升论文质量的证据，因为对照组在大多数参数上优于实验组。
引用
@article{arxiv.2302.04536,
title = {Better by you, better than me, chatgpt3 as writing assistance in students essays},
author = {Zeljana Basic and Ana Banovac and Ivana Kruzic and Ivan Jerkovic},
journal= {arXiv preprint arXiv:2302.04536},
year = {2023}
}