中文

评估 ChatGPT 与人类社会的跨文化对齐:一项实证研究

计算与语言 2023-04-03 v2

摘要

近期发布的 ChatGPT 因其在对话中生成类人回复的卓越能力而获得广泛认可。鉴于其被来自不同国家的用户使用,且训练于包含多元文化与社会规范的海量多语言语料,评估其在文化适应上的有效性至关重要。在本文中,我们通过分析 ChatGPT 对旨在量化人类文化差异问题的回复,考察其潜在文化背景。我们的发现表明,当以美国语境提示时,ChatGPT 表现出与美国文化的强烈对齐,但对其他文化语境适应较弱。此外,通过使用不同提示探查模型,我们表明英文提示降低了模型回复的方差,抹平文化差异并使其偏向美国文化。本研究为 ChatGPT 的文化意涵提供了有价值的见解,并凸显了语言技术中更大多样性与文化意识的必要性。

关键词

引用

@article{arxiv.2303.17466,
  title  = {Assessing Cross-Cultural Alignment between ChatGPT and Human Societies: An Empirical Study},
  author = {Yong Cao and Li Zhou and Seolhwa Lee and Laura Cabello and Min Chen and Daniel Hershcovich},
  journal= {arXiv preprint arXiv:2303.17466},
  year   = {2023}
}

备注

C3NLP@EACL 2023