中文

StarGAN-VC+ASR:由自动语音识别正则化的基于 StarGAN 的非平行语音转换

声音 2023-01-18 v1 人工智能

摘要

在语音转换(VC)过程中,保留输入语音的语言内容至关重要。基于 StarGAN 的语音转换方法是一种最近开发的方法,可实现非平行多对多语音转换。尽管该方法功能强大,但当可用训练样本数量极少时,它可能无法保留输入语音的语言内容。为了克服这一问题,我们提出使用自动语音识别来辅助模型训练,以改进 StarGAN-VC,特别是在低资源场景下。实验结果表明,使用我们提出的方法,StarGAN-VC 能够比原始 StarGAN-VC 保留更多的语言信息。

关键词

引用

@article{arxiv.2108.04395,
  title  = {StarGAN-VC+ASR: StarGAN-based Non-Parallel Voice Conversion Regularized by Automatic Speech Recognition},
  author = {Shoki Sakamoto and Akira Taniguchi and Tadahiro Taniguchi and Hirokazu Kameoka},
  journal= {arXiv preprint arXiv:2108.04395},
  year   = {2023}
}

备注

5 pages, 6 figures, Accepted to INTERSPEECH 2021