端到端同声传译的最新进展
声音
2024-08-21 v2 人工智能
计算与语言
音频与语音处理
摘要
同声传译（SimulST）是一项要求苛刻的任务，涉及在持续处理语音输入的同时实时生成翻译。本文全面概述了SimulST研究的最新进展，重点关注四大挑战。首先，处理冗长且连续的语音流所涉及的复杂性构成了重大障碍。其次，由于需要即时翻译输出，满足实时要求存在固有困难。第三，在翻译质量和延迟约束之间取得平衡仍然是一个关键挑战。最后，标注数据的稀缺性为任务增加了另一层复杂性。通过探索这些挑战及提出的解决方案，我们旨在为SimulST研究的当前格局提供有价值的见解，并指出未来探索的有前景方向。
引用
@article{arxiv.2406.00497,
title = {Recent Advances in End-to-End Simultaneous Speech Translation},
author = {Xiaoqian Liu and Guoqiang Hu and Yangfan Du and Erfeng He and Yingfeng Luo and Chen Xu and Tong Xiao and Jingbo Zhu},
journal= {arXiv preprint arXiv:2406.00497},
year = {2024}
}
备注
Accepted by IJCAI 2024