中文

选择优于控制:用户如何使用剧情内与剧情外提示与大语言模型写作

人机交互 2023-03-07 v1 计算与语言

摘要

我们提出一种针对大语言模型(LLMs)提示的概念视角,区分(1)剧情内提示(叙事的一部分,例如“从前,我看见一只狐狸……”)和(2)剧情外提示(外部的,例如“写关于狐狸的冒险”)。借助该视角,我们研究了 Prolific 上 129 名众包工作者如何使用不同用户界面(1 vs 3 条建议,有/无剧情外提示;基于 GPT-3 实现)撰写短文:当界面提供多条建议并支持剧情外提示选项时,参与者更倾向于从多条建议中选择,而非通过剧情外提示控制它们。当参与者提供剧情外提示时,是为了寻求灵感、主题或事实。特别是单条建议同时受到剧情内和剧情外信息的引导。本工作通过揭示以下发现为生成模型的人机交互提供启示:(1)撰写剧情外提示需要付出努力,(2)人们结合剧情内与剧情外提示,(3)他们利用自己的草稿(即剧情内信息)和建议时机来策略性地引导 LLMs。

关键词

引用

@article{arxiv.2303.03199,
  title  = {Choice Over Control: How Users Write with Large Language Models using Diegetic and Non-Diegetic Prompting},
  author = {Hai Dang and Sven Goller and Florian Lehmann and Daniel Buschek},
  journal= {arXiv preprint arXiv:2303.03199},
  year   = {2023}
}

备注

17 pages, 9 figures, 3 tables, ACM CHI 2023