ChatGPT 角色扮演数据集:用户动机与模型自然性分析
计算与语言
2024-03-28 v1 人机交互
摘要
最近的交互式大型语言模型如 ChatGPT 正在各个领域取得进展;然而,它们在自然和角色扮演对话设置中的行为仍未得到充分探索。本研究通过深入调查 ChatGPT 在不同对话设置下的行为,分析其在正常模式和角色扮演模式下的交互方式来弥补这一空白。我们引入了一个新的数据集,包含广泛的人类与 AI 对话的 annotated 数据,标注了用户动机和模型自然性,用于检视 (i) 人类如何与对话式 AI 模型交互,以及 (ii) AI 模型的响应是否自然。我们的研究突显了用户在与 ChatGPT 交互时动机的多样性以及 AI 自然性的变化,既揭示了人类与 AI 之间自然对话的细腻动态,也为改进人机沟通的有效性提供了新的途径。
引用
@article{arxiv.2403.18121,
title = {ChatGPT Role-play Dataset: Analysis of User Motives and Model Naturalness},
author = {Yufei Tao and Ameeta Agrawal and Judit Dombi and Tetyana Sydorenko and Jung In Lee},
journal= {arXiv preprint arXiv:2403.18121},
year = {2024}
}
备注
Accepted by LREC-COLING 2024