利用发音表征的口音转换
音频与语音处理
2024-06-11 v1
摘要
将非母语口音语音转换为母语(美式)英语具有广泛的应用,例如提高非母语语音的可懂度。先前在该领域的工作使用音素后验图作为目标语音表示来训练声学模型,然后用于提取输入语音的紧凑表示以进行口音转换。在这项工作中,我们引入了使用从声学-发音语音反演系统中提取的有效发音语音表示的想法,以改进口音转换中使用的声学模型。融入发音表征的想法源于它们能够很好地表征语音中的口音。为了将发音表征与传统的音素后验图相结合,提出了一种基于多任务学习的声学模型。客观和主观评估表明,使用发音表征可以提高口音转换的有效性。
引用
@article{arxiv.2406.05947,
title = {Accent Conversion with Articulatory Representations},
author = {Yashish M. Siriwardena and Nathan Swedlow and Audrey Howard and Evan Gitterman and Dan Darcy and Carol Espy-Wilson and Andrea Fanelli},
journal= {arXiv preprint arXiv:2406.05947},
year = {2024}
}
备注
Accepted at INTERSPEECH 2024