中文

一个机器人走进酒吧:语言模型能否作为喜剧的创意支持工具?评估LLMs与喜剧演员的幽默对齐

人工智能 2024-06-05 v2 计算与语言

摘要

我们采访了二十位专业喜剧演员,他们在观众面前进行现场表演,并在2023年8月于爱丁堡边缘艺术节及线上举办的为期三小时的“AI x 喜剧”工作坊中,将人工智能用于其艺术创作过程。工作坊包括使用大型语言模型(LLMs)进行喜剧写作、一份评估AI作为写作工具的创意支持指数的人机交互问卷,以及一个聚焦于喜剧演员使用AI的动机、过程及其对偏见、审查和版权伦理关切的焦点小组。参与者指出,安全过滤和指令微调LLMs中使用的现有审核策略通过抹去少数群体及其视角来强化霸权观点,并将其定性为一种审查形式。同时,大多数参与者认为LLMs未能成功作为创意支持工具,因为它们产生了平淡且带有偏见的喜剧套路,类似于“1950年代游轮喜剧素材,但种族主义色彩稍淡”。我们的工作拓展了关于有害言论与作为抵抗、讽刺和“向上打击”实践的“冒犯性”语言之间微妙差异的学术研究。我们还审视了这些语言模型背后的全球价值对齐,并讨论了基于社区的价值对齐和数据所有权对于构建更符合艺术家需求的AI工具的重要性。

关键词

引用

@article{arxiv.2405.20956,
  title  = {A Robot Walks into a Bar: Can Language Models Serve as Creativity Support Tools for Comedy? An Evaluation of LLMs' Humour Alignment with Comedians},
  author = {Piotr Wojciech Mirowski and Juliette Love and Kory W. Mathewson and Shakir Mohamed},
  journal= {arXiv preprint arXiv:2405.20956},
  year   = {2024}
}

备注

15 pages, 1 figure, published at ACM FAccT 2024