NADI 2024:第五届细粒度阿拉伯方言识别共享任务
计算与语言
2024-07-09 v1 人工智能
摘要
我们描述了第五届Nuanced Arabic Dialect Identification Shared Task(NADI 2024)的研究结果。NADI的目标是通过提供指导方针、数据集、建模机会以及标准化的评估条件,推动阿拉伯语自然语言处理领域的进步,使研究人员能够在预先规定的任务上协作竞争。NADI 2024针对方言识别作为多标签任务(子任务1)、阿拉伯语方言程度识别(子任务2)以及方言到标准阿拉伯语(MSA)机器翻译(子任务3)。共有51个唯一团队注册参加共享任务,其中12个团队参赛(在测试阶段提交了76个有效提交)。其中,子任务1有3个团队参赛,子任务2有3个团队参赛,子任务3有8个团队参赛。获胜团队分别在子任务1上取得了50.57的F1分数,子任务2上达到了0.1403的RMSE,子任务3上达到了20.44的BLEU分数。结果表明,方言识别和机器翻译等阿拉伯语方言处理任务仍然具有挑战性。我们描述了参赛团队所采用的方法,并简要展望了NADI的未来发展。
引用
@article{arxiv.2407.04910,
title = {NADI 2024: The Fifth Nuanced Arabic Dialect Identification Shared Task},
author = {Muhammad Abdul-Mageed and Amr Keleg and AbdelRahim Elmadany and Chiyu Zhang and Injy Hamed and Walid Magdy and Houda Bouamor and Nizar Habash},
journal= {arXiv preprint arXiv:2407.04910},
year = {2024}
}
备注
Accepted by The Second Arabic Natural Language Processing Conference