文化感知对话：一个框架与基准
计算与语言
2025-10-14 v1
摘要
现有的基准与实际挑战不符，这些挑战体现在大语言模型（LLM）在与来自不同文化背景的用户交互时所面临的挑战。本工作引入了第一个旨在评估 LLM 在真实多元文化对话环境中的框架和基准。我们在社会文化理论基础上，正式化了语言风格——这是文化交流的关键要素——如何受情境、人际关系和文化背景的影响。我们基于该框架构建了基准数据集，由具有多元文化背景的评审者进行标注，并提出了一套新的跨文化 NLP 评估要求：对话框架、风格敏感性和主观正确性。我们对当今顶级 LLM 在基准上的表现进行评估，结果显示这些模型在对话环境中处理文化适应方面存在挑战。
引用
@article{arxiv.2510.11563,
title = {Culturally-Aware Conversations: A Framework & Benchmark for LLMs},
author = {Shreya Havaldar and Sunny Rai and Young-Min Cho and Lyle Ungar},
journal= {arXiv preprint arXiv:2510.11563},
year = {2025}
}
备注
To appear at the 4th HCI + NLP Workshop @ EMNLP