概念文化指数:通过相对普遍性度量文化特定性
计算与语言
2026-02-11 v1 人工智能
摘要
大型语言模型(LLM)日益在多文化环境中部署,但对句子水平文化特定性的系统性评估仍未得到充分探讨。我们提出概念文化指数(CCI),用于估计句子水平的文化特定性。CCI 定义为目标文化中普遍性估计值与其他文化中平均普遍性估计值的差值。这种表述方式使用户能够通过比较设置来操作性地控制文化范围,并提供可解释性,因为得分来源于底层普遍性估计。我们在 400 句话(200 句特定于文化、200 句通用)上验证了 CCI,结果得分分布符合预期:特定于文化的句子得分较高,通用句子得分较低。对于二元可分离性,CCI 在直接 LLM 评分方面表现更好,为针对目标文化专门化的模型带来了超过 10 分的 AUC 提升。我们的代码已公开于 https://github.com/IyatomiLab/CCI。
引用
@article{arxiv.2602.09444,
title = {Conceptual Cultural Index: A Metric for Cultural Specificity via Relative Generality},
author = {Takumi Ohashi and Hitoshi Iyatomi},
journal= {arXiv preprint arXiv:2602.09444},
year = {2026}
}
备注
9 pages, 2 figures, 8 tables. Accepted at the First Workshop on Multilingual Multicultural Evaluation (MME) @ EACL 2026