机器翻译、变音符号与变音符号化的相互作用
计算与语言
2024-04-10 v1 人工智能
摘要
我们研究两个研究问题：(1) 在多任务学习环境中，机器翻译(MT)和变音符号化如何相互影响性能；(2) 保留（与移除）变音符号对MT性能的影响。我们在55种不同语言（36种非洲语言和19种欧洲语言）的高资源(HR)和低资源(LR)设置下检验这两个问题。对于(1)，结果表明变音符号化在LR场景中显著有益于MT，对某些语言性能翻倍甚至三倍，但在HR场景中损害MT。我们发现MT在LR中损害变音符号化，但在HR中对某些语言显著有益。对于(2)，无论变音符号保留还是移除，MT性能相似。此外，我们提出两类度量来衡量变音符号系统的复杂性，发现这些度量与我们的变音符号化模型的性能正相关。总体而言，我们的工作为在不同数据规模条件下开发MT和变音符号化系统提供了见解，并且可能具有超出我们研究的55种语言的普适性。
引用
@article{arxiv.2404.05943,
title = {Interplay of Machine Translation, Diacritics, and Diacritization},
author = {Wei-Rui Chen and Ife Adebara and Muhammad Abdul-Mageed},
journal= {arXiv preprint arXiv:2404.05943},
year = {2024}
}
备注
Accepted to NAACL 2024 Main Conference