SpeechQE：评估直接语音翻译的质量
计算与语言
2024-10-30 v1
摘要
机器翻译自动质量评估的最新进展仅关注书面语言，而语音模态则尚未得到充分探索。在这项工作中，我们构建了语音翻译质量评估（SpeechQE）的任务，构建了一个基准，并评估了一系列基于级联和端到端架构的系统。在此过程中，我们引入了一种利用预训练文本LLM的新型端到端系统。结果表明，端到端方法比在级联系统中使用为文本设计的质量评估系统更适合评估直接语音翻译的质量。更广泛地说，我们认为语音翻译的质量评估需要作为一个独立于文本的问题来研究，并发布我们的数据和模型以指导该领域的进一步研究。
引用
@article{arxiv.2410.21485,
title = {SpeechQE: Estimating the Quality of Direct Speech Translation},
author = {HyoJung Han and Kevin Duh and Marine Carpuat},
journal= {arXiv preprint arXiv:2410.21485},
year = {2024}
}
备注
EMNLP2024