中文

说话恰当的语言:专家对齐在用户与AI交互中的影响

人工智能 2025-02-27 v1 计算与语言 人机交互

摘要

我们以25,000个Bing Copilot对话为样本,研究AI代理如何响应不同专业知识水平的用户,并探讨其对用户体验在多个维度上的影响。我们的发现表明,在各种主题领域中,该代理大多以专业或专家水平的专业知识进行响应(占对话的77%),这与正面的用户体验相关,无论用户的专业知识水平如何。专家水平不对齐(即AI代理的响应水平低于用户),会对整体用户体验产生负面影响,对于更复杂的任务影响更为显著。我们还发现,当AI代理的响应水平与用户的专业知识水平相匹配时,用户的参与度更高,可通过对话中单词的数量进行衡量。我们的发现凸显了在设计以用户为中心的AI系统时,确保用户与AI之间专业知识水平对齐的重要性,以实现满意且富有成效的交互。

关键词

引用

@article{arxiv.2502.18685,
  title  = {Speaking the Right Language: The Impact of Expertise Alignment in User-AI Interactions},
  author = {Shramay Palta and Nirupama Chandrasekaran and Rachel Rudinger and Scott Counts},
  journal= {arXiv preprint arXiv:2502.18685},
  year   = {2025}
}

备注

arXiv Version