实验叙事:人类众包讲故事与AI讲故事的比较
计算与语言
2024-11-05 v2 人工智能
摘要
本文提出了一个框架,结合行为实验与计算实验,采用虚构提示作为新颖工具,用于考察人类与生成式AI在讲故事过程中的文化产物与社会偏见。该研究通过融合叙事学方法与推断统计学,分析了2019年6月由众包工作者创作的250篇故事,以及2023年3月由GPT-3.5和GPT-4生成的80篇故事。众包工作者与大型语言模型均对关于创造人工人类并与之相恋的相同提示作出了回应。所提出的实验范式允许对人类与LLM生成的故事叙述进行直接且受控的比较。对皮格马利翁式提示的回应证实了皮格马利翁神话在人类与大型语言模型的集体想象中均普遍存在。所有被征集的叙事都呈现了一种科学或技术追求。分析揭示,相较于人类所写故事,GPT-3.5尤其是GPT-4在性别角色与性取向方面更为进步。尽管采用默认设置且无需额外提示的AI叙事偶尔能提供新颖的情节转折,但其所给出的场景与修辞不如人类创作的文本富有想象力。所提出的框架主张,虚构作品可被用作窥探人类与基于AI的集体想象及社会维度的窗口。
引用
@article{arxiv.2310.12902,
title = {Experimental Narratives: A Comparison of Human Crowdsourced Storytelling and AI Storytelling},
author = {Nina Begus},
journal= {arXiv preprint arXiv:2310.12902},
year = {2024}
}