GPT 是否生成较少直译的译文？
计算与语言
2023-06-07 v4 人工智能
摘要
诸如 GPT-3 之类的大语言模型（LLMs）已成为能够应对许多自然语言生成或理解任务的通用语言模型。在机器翻译（MT）任务上，多项工作研究了少样本提示机制以从 LLM 中引出更好的翻译。然而，关于此类翻译与标准神经机器翻译（NMT）模型生成的翻译在质量上有何不同，相关研究相对较少。本工作中，我们从两个系统所产生译文的直译程度方面考察这些差异。利用涉及词对齐与单调性的直译度量，我们发现 GPT 的英译外（E-X）翻译往往直译程度较低，同时在 MT 质量指标上表现出相似或更好的分数。我们证明这一发现在人工评估中同样成立。随后我们展示，在翻译含有习语表达的句子时，这些差异尤为明显。
引用
@article{arxiv.2305.16806,
title = {Do GPTs Produce Less Literal Translations?},
author = {Vikas Raunak and Arul Menezes and Matt Post and Hany Hassan Awadalla},
journal= {arXiv preprint arXiv:2305.16806},
year = {2023}
}
备注
ACL 2023