我们在非自回归翻译上取得了什么成果?
计算与语言
2024-05-22 v1
摘要
最近的进展使得非自回归翻译(NAT)可与自回归方法(AT)相媲美。然而,使用 BLEU 对其进行评估已被证明与人工标注的相关性较弱。全面比较非自回归翻译与自回归翻译的研究有限,导致 NAT 与 AT 的真实接近程度仍存在不确定性。为了填补这一空白,我们在包括人工评估在内的多个维度上,系统地评估了四种具有代表性的 NAT 方法。我们的实证结果表明,尽管性能差距缩小,但在更可靠的评估指标下,SOTA NAT 的表现仍逊于 AT。此外,我们发现显式地对依赖关系进行建模对于生成自然语言和泛化至分布外序列至关重要。
引用
@article{arxiv.2405.12788,
title = {What Have We Achieved on Non-autoregressive Translation?},
author = {Yafu Li and Huajian Zhang and Jianhao Yan and Yongjing Yin and Yue Zhang},
journal= {arXiv preprint arXiv:2405.12788},
year = {2024}
}
备注
ACL 2024 Findings