基于证据中心设计的生成式 AI 写作评估
人机交互
2024-01-18 v1
摘要
我们提出了一种基于学习分析的方法，用于评估人类与生成式人工智能的协作写作。该方法以证据中心设计为框架，利用知识陈述、知识转化和认知临场感等要素来识别评估主张；使用从 CoAuthor 写作工具收集的数据作为这些主张的潜在证据；并采用认识论网络分析从数据中对主张进行推断。研究结果揭示了不同 CoAuthor 用户群体在写作过程中的显著差异，表明我们的方法是评估人机协作写作的一种可行途径。
引用
@article{arxiv.2401.08964,
title = {Evidence-centered Assessment for Writing with Generative AI},
author = {Yixin Cheng and Kayley Lyons and Guanliang Chen and Dragan Gasevic and Zachari Swiecki},
journal= {arXiv preprint arXiv:2401.08964},
year = {2024}
}