有了好的机器翻译就无需端到端:先翻译后摘要的跨语言摘要案例
计算与语言
2024-09-04 v1
摘要
近期研究认为,用于跨语言摘要的端到端系统设计是具有竞争力的解决方案,其性能与传统流水线设计相当甚至更优。仔细审视证据后发现,这种直觉仅基于少数几种语言的结果或使用了性能不足的流水线基线。在这项工作中,我们比较了这两种跨语言摘要范式,涉及39种源语言到英语的摘要任务,并表明一个简单的“先翻译后摘要”流水线设计始终优于即使能访问海量平行数据的端到端系统。对于我们的流水线模型表现不佳的语言,我们表明系统性能与公开的 BLEU 分数高度相关,这使得从业者能够先验地确定某个语言对的可行性。与近期的发表趋势相反,我们的结果表明,单语摘要和翻译任务各自进展的结合,能提供比端到端系统更好的性能,这表明应谨慎考虑端到端设计。
引用
@article{arxiv.2409.00414,
title = {With Good MT There is No Need For End-to-End: A Case for Translate-then-Summarize Cross-lingual Summarization},
author = {Daniel Varab and Christian Hardmeier},
journal= {arXiv preprint arXiv:2409.00414},
year = {2024}
}