若我以不同语言提问？衡量跨语言功能相似性
计算与语言
2025-10-03 v2 机器学习
摘要
不同语言的模型输出有多么相似？本文利用最近提出的模型相似度度量指标 对20种语言、47个科目上的GlobalMMLU进行分析。我们的分析表明，随着模型规模和能力的提升，模型的响应在不同语言间变得越来越一致。有趣的是，模型在自身内部的跨语言一致性大于其他模型以相同语言被激活的一致性。这些结果不仅凸显了 作为衡量多语言可靠性实用工具的价值，也可能为指导开发更一致的多语言系统提供潜在指导。
引用
@article{arxiv.2509.04032,
title = {What if I ask in \textit{alia lingua}? Measuring Functional Similarity Across Languages},
author = {Debangan Mishra and Arihant Rastogi and Agyeya Negi and Shashwat Goel and Ponnurangam Kumaraguru},
journal= {arXiv preprint arXiv:2509.04032},
year = {2025}
}
备注
Accepted into Multilingual Representation Learning (MRL) Workshop at EMNLP 2025