MG-VAE:具有特定地域风格的深度中国民歌生成
多媒体
2019-10-01 v1 声音
音频与语音处理
摘要
中国民歌中的地域风格是一笔丰富的宝藏,可用于民族音乐创作与民间文化研究。本文提出 MG-VAE,一种基于 VAE(变分自编码器)的音乐生成模型,能够以可操控的方式捕捉特定音乐风格并生成新颖的中国民歌(民歌)曲调。具体而言,我们通过对抗训练将 VAE 的潜空间解耦为四部分,以控制音高与节奏序列以及音乐风格与内容的信息。详细地说,使用两个分类器分离风格与内容潜空间,并利用时序监督解耦音高与节奏序列。实验结果表明解耦成功,且我们的模型能够创作具有可控地域风格的新颖民歌。据我们所知,这是首个将深度生成模型与对抗训练应用于中国音乐生成的研究。
引用
@article{arxiv.1909.13287,
title = {MG-VAE: Deep Chinese Folk Songs Generation with Specific Regional Style},
author = {Jing Luo and Xinyu Yang and Shulei Ji and Juan Li},
journal= {arXiv preprint arXiv:1909.13287},
year = {2019}
}
备注
Accepted by the 7th Conference on Sound and Music Technology, 2019, Harbin, China