CA*:解决计算感知延迟在同步语音翻译中的评估陷阱
计算与语言
2024-10-22 v1 人工智能
摘要
同步语音翻译 (SimulST) 系统必须在翻译质量与响应时间之间进行权衡,因此延迟测量对于评估其实际性能至关重要。然而,长久以来都有这样一种观点,即当前的指标在未分段的流式设置下会产生不切实际的高延迟测量。本文调查了这一现象,揭示了其根本原因在于现有延迟评估方法所基于的根本误解。我们展示了这一问题不仅影响流式环境,也影响不同指标下的段落级延迟评估。 Furthermore, 我们提出了一种修改方案,以正确度量 SimulST 系统的计算感知延迟,解决现有指标的局限性。
引用
@article{arxiv.2410.16011,
title = {CA*: Addressing Evaluation Pitfalls in Computation-Aware Latency for Simultaneous Speech Translation},
author = {Xi Xu and Wenda Xu and Siqi Ouyang and Lei Li},
journal= {arXiv preprint arXiv:2410.16011},
year = {2024}
}