中文

CycleTransGAN-EVC:一种基于 CycleGAN 并引入 Transformer 的情感语音转换模型

声音 2021-12-01 v1 机器学习 音频与语音处理

摘要

在本研究中,我们通过扩大模型的感受野来探索 Transformer 捕捉帧间内部关系的能力。具体而言,我们提出了一种基于 CycleGAN 并引入 Transformer 的模型,并研究其在情感语音转换任务中的能力。在训练过程中,我们采用课程学习逐步增加帧长,使模型能够从短片段看到整段语音。所提方法在日本情感语音数据集上进行了评估,并通过客观与主观评价与若干基线(ACVAE、CycleGAN)进行了比较。结果表明,我们提出的模型能够以更高的情感强度与质量实现情感转换。

关键词

引用

@article{arxiv.2111.15159,
  title  = {CycleTransGAN-EVC: A CycleGAN-based Emotional Voice Conversion Model with Transformer},
  author = {Changzeng Fu and Chaoran Liu and Carlos Toshinori Ishi and Hiroshi Ishiguro},
  journal= {arXiv preprint arXiv:2111.15159},
  year   = {2021}
}