面向自动配音的机器翻译冗长度控制
计算与语言
2021-10-11 v1 声音
音频与语音处理
摘要
自动配音旨在用不同语言的合成语音无缝替换视频文档中的语音。该任务面临诸多挑战,其中之一是生成不仅传达原始内容而且与对应话语时长相匹配的翻译。本文关注控制机器翻译输出冗长度的问题,以使我们的自动配音流水线后续步骤能够生成更高质量的配音。我们提出了控制机器翻译输出冗长度的新方法,并通过内在和外在评估将其与最先进水平进行比较。在我们的实验中,我们使用一个公开数据集将英语演讲配音为法语、意大利语、德语和西班牙语。最后,我们报告了广泛的 subjective 测试,衡量机器翻译冗长度控制对配音视频片段最终质量的影响。
引用
@article{arxiv.2110.03847,
title = {Machine Translation Verbosity Control for Automatic Dubbing},
author = {Surafel M. Lakew and Marcello Federico and Yue Wang and Cuong Hoang and Yogesh Virkar and Roberto Barra-Chicote and Robert Enyedi},
journal= {arXiv preprint arXiv:2110.03847},
year = {2021}
}
备注
Accepted at IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP) 2021