同声传译的对比反馈机制
计算与语言
2026-04-13 v2
摘要
近期同声传译(SST)的进展集中在使离线训练的ST模型能够进行同步推理的决策策略上。这些决策策略不仅控制SST中的质量-延迟权衡,还通过延迟翻译以获取更多上下文或通过稳定假设检测丢弃这些预测,来减轻不稳定预测对翻译质量的影响。然而,这些策略往往忽视了利用不稳定预测的潜在好处。我们为SST引入了对比反馈机制(CFM),这是一种利用这些不稳定预测作为反馈来提升翻译质量的新方法。CFM通过对比目标引导系统消除这些预测中的不良模型行为。在MuST-C v1.0数据集上对8种语言的3种最先进的决策策略进行的实验表明,CFM有效提升了SST的性能。
引用
@article{arxiv.2407.20524,
title = {Contrastive Feedback Mechanism for Simultaneous Speech Translation},
author = {Haotian Tan and Sakriani Sakti},
journal= {arXiv preprint arXiv:2407.20524},
year = {2026}
}
备注
Accepted to Interspeech 2024 main conference