ASCAT:阿拉伯语科学语料库与高级翻译评估基准
计算与语言
2026-04-02 v1
摘要
我们提出ASCAT(Arabic Scientific Corpus for Advanced Translation,即阿拉伯语科学翻译语料库),这是一个高质量的英阿平行基准语料库,旨用于科学翻译评估,经系统性的多引擎翻译与人类验证管道构建。与现有阿拉伯-英语语料库依赖短句或单领域文本不同,ASCAT聚焦全篇科学摘要,英文平均141.7词,阿拉伯语平均111.78词,涵盖物理、数学、计算机科学、量子力学与人工智能五个科学领域。每个摘要分别使用三种互补架构进行翻译:生成式AI(Gemini)、基于Transformer的模型(Hugging Face \texttt{quickmt-en-ar})以及商业MT API(Google Translate、DeepL),随后由领域专家在词汇、句法和语义层面进行验证。最终语料库包含67,293个英文词元和60,026个阿拉伯语词元,阿拉伯语词汇表为17,604个唯一单词,体现了该语言的形态丰富性。我们在该语料库上对三种最新大语言模型进行基准测试:GPT-4o-mini(BLEU:37.07)、Gemini-3.0-Flash-Preview(BLEU:30.44)和Qwen3-235B-A22B(BLEU:23.68),证明其作为评估基准具有良好的判别能力。ASCAT填补了阿拉伯语科学MT资源的关键空白,旨在支持科学翻译质量的严谨评估以及领域特定翻译模型的训练。
引用
@article{arxiv.2604.00015,
title = {ASCAT: An Arabic Scientific Corpus and Benchmark for Advanced Translation Evaluation},
author = {Serry Sibaee and Khloud Al Jallad and Zineb Yousfi and Israa Elsayed Elhosiny and Yousra El-Ghawi and Batool Balah and Omer Nacar},
journal= {arXiv preprint arXiv:2604.00015},
year = {2026}
}