评估 ChatGPT 与人类社会的跨文化对齐:一项实证研究
计算与语言
2023-04-03 v2
摘要
近期发布的 ChatGPT 因其在对话中生成类人回复的卓越能力而获得广泛认可。鉴于其被来自不同国家的用户使用,且训练于包含多元文化与社会规范的海量多语言语料,评估其在文化适应上的有效性至关重要。在本文中,我们通过分析 ChatGPT 对旨在量化人类文化差异问题的回复,考察其潜在文化背景。我们的发现表明,当以美国语境提示时,ChatGPT 表现出与美国文化的强烈对齐,但对其他文化语境适应较弱。此外,通过使用不同提示探查模型,我们表明英文提示降低了模型回复的方差,抹平文化差异并使其偏向美国文化。本研究为 ChatGPT 的文化意涵提供了有价值的见解,并凸显了语言技术中更大多样性与文化意识的必要性。
引用
@article{arxiv.2303.17466,
title = {Assessing Cross-Cultural Alignment between ChatGPT and Human Societies: An Empirical Study},
author = {Yong Cao and Li Zhou and Seolhwa Lee and Laura Cabello and Min Chen and Daniel Hershcovich},
journal= {arXiv preprint arXiv:2303.17466},
year = {2023}
}
备注
C3NLP@EACL 2023