大型语言模型生成的回复被认为具有共情性
计算与语言
2024-03-28 v1 人工智能
摘要
大型语言模型(LLM)在许多任务上表现出了令人惊讶的性能，包括撰写显示共情性的支持性消息。在这里，我们让这些模型针对描述常见生活经历（如工作场所情境、育儿、人际关系以及其他引发焦虑和愤怒的情境）的帖子生成共情性回复。通过两项研究(N=192, 202)，我们向人类评分者展示了由多个模型（GPT4 Turbo、Llama2和Mistral）撰写的各种回复，并让人们对这些回复的共情程度进行评分。我们发现，LLM生成的回复始终比人类撰写的回复被评为更具共情性。语言分析还表明，这些模型在标点符号、表情符号和某些词语的使用上具有独特、可预测的“风格”。这些结果凸显了在共情重要的情境中使用LLM增强人类同伴支持的潜力。
引用
@article{arxiv.2403.18148,
title = {Large Language Models Produce Responses Perceived to be Empathic},
author = {Yoon Kyung Lee and Jina Suh and Hongli Zhan and Junyi Jessy Li and Desmond C. Ong},
journal= {arXiv preprint arXiv:2403.18148},
year = {2024}
}