声调语言的自动歌曲翻译
计算与语言
2022-03-28 v1 人工智能
声音
音频与语音处理
摘要
本文针对声调语言开发自动歌曲翻译（AST），并解决除传达原意外将词语声调与歌曲旋律对齐这一独特挑战。我们提出有效 AST 的三项准则——保留语义、可唱性与可懂度——并为之设计度量指标。我们建立了英译中歌曲翻译的新基准，并开发了无监督 AST 系统 Guided AliGnment for Automatic Song Translation (GagaST)，其将预训练与三种解码约束相结合。自动与人工评测均表明 GagaST 成功平衡了语义与可唱性。
引用
@article{arxiv.2203.13420,
title = {Automatic Song Translation for Tonal Languages},
author = {Fenfei Guo and Chen Zhang and Zhirui Zhang and Qixin He and Kejun Zhang and Jun Xie and Jordan Boyd-Graber},
journal= {arXiv preprint arXiv:2203.13420},
year = {2022}
}
备注
Accepted at Findings of ACL 2022, 15 pages, 4 Tables and 10 Figures