中文

对生成式AI共同创作研究的评判:实验证据

人机交互 2023-05-23 v1 人工智能 计算与语言 计算机与社会 综合经济学 经济学

摘要

ChatGPT的推出引发了关于生成式AI(大语言模型;LLMs)使用的公共辩论,包括研究者对其的使用。在当前工作中,我们测试了将部分研究过程委托给LLM是否会导致人们对研究者及科学产出产生不信任和贬低。参与者(N=402)考量了一位将研究过程的某些环节委托给博士生或LLM的研究者,并评价了(1)道德可接受性,(2)对该科学家监督未来项目的信任度,以及(3)产出的准确性和质量。人们认为委托给LLM比委托给人更不可接受(d = -0.78)。委托给LLM也降低了对监督未来研究项目的信任(d = -0.80),并且人们认为结果准确性更低、质量更差(d = -0.85)。我们讨论了这种贬低可能如何转化为对生成式AI使用情况的少报。

关键词

引用

@article{arxiv.2305.11873,
  title  = {Judgments of research co-created by generative AI: experimental evidence},
  author = {Paweł Niszczota and Paul Conway},
  journal= {arXiv preprint arXiv:2305.11873},
  year   = {2023}
}

备注

10 pages, 2 tables, 1 figure