基于 Euas-20 的大型语言模型翻译性能评估
计算与语言
2024-08-07 v1 人工智能
摘要
近年来,随着深度学习技术的快速发展,像 BERT 和 GPT 这样的大型语言模型(LLM)在自然语言处理任务中取得了突破性成果。机器翻译作为自然语言处理的核心任务,也受益于大型语言模型的发展,实现了质的飞跃。尽管大型语言模型在翻译性能方面取得了显著进展,但机器翻译仍面临诸多挑战。因此,本文构建了名为 Euas-20 的数据集,用于评估大型语言模型在翻译任务中的性能、不同语言的翻译能力,以及预训练数据对大型语言模型翻译能力的影响,为研究人员和开发者提供参考。
引用
@article{arxiv.2408.03119,
title = {Evaluating the Translation Performance of Large Language Models Based on Euas-20},
author = {Yan Huang and Wei Liu},
journal= {arXiv preprint arXiv:2408.03119},
year = {2024}
}
备注
15 pages, 8 figures