技术报告：BUT 语音翻译系统
计算与语言
2020-10-23 v1 人工智能
摘要
本文描述了 BUT 的语音翻译系统。这些系统为英语德语离线语音翻译系统。系统基于我们先前的工作 \cite{Jointly_trained_transformers}。尽管端到端与级联~(ASR-MT) 口语语言翻译~(SLT) 系统正达到相当的性能，但在翻译 ASR 假设相较于预言输入文本时观察到大幅退化。为减轻此性能退化，我们将 ASR 与 MT 模块以 ASR 目标作为辅助损失进行联合训练。两个网络通过神经隐表示相连。该模型相对于最终目标函数具有端到端可微路径，并利用 ASR 目标以实现更好优化。在推理期间，两个模块（即 ASR 与 MT）通过对应于 n-best 假设的隐表示相连。与独立训练的 ASR 和 MT 模型集成进一步提升了系统性能。
引用
@article{arxiv.2010.11593,
title = {A Technical Report: BUT Speech Translation Systems},
author = {Hari Krishna Vydana and Lukas Burget and Jan Cernocky},
journal= {arXiv preprint arXiv:2010.11593},
year = {2020}
}