量化跨语言迁移:用于语音旁语言任务的跨语言迁移矩阵
音频与语音处理
2026-03-10 v1 计算与语言
摘要
语音旁语言任务通常被视为相对语言无关,因为它们依赖于非语言声学线索而非词汇内容。然而,旁往往在跨语言条件下出现性能下降,表明语言依赖性并非可忽略。目前文献通常聚焦于特定语言对或任务特定情境,限制了可比性,阻碍了对任务层面语言依赖性的系统评估。我们引入跨语言迁移矩阵(CLTM),一种系统性方法,用于量化给定任务中语言对之间的跨语言相互作用。我们将 CLTM 应用于两项旁语言任务——性别识别和说话人验证,使用基于多语言 HuBERT 的编码器,分析捐赠语言数据对目标语言性能的影响。我们的结果揭示了不同任务和语言间的显著迁移模式,反映出系统性、语言依赖性效应。
引用
@article{arxiv.2603.08231,
title = {Quantifying Cross-Lingual Transfer in Paralinguistic Speech Tasks},
author = {Pol Buitrago and Oriol Pareras and Federico Costa and Javier Hernando},
journal= {arXiv preprint arXiv:2603.08231},
year = {2026}
}
备注
6 pages, 5 figures, Submitted to Interspeech 2026