基于音乐音频片段条件生成的歌词行
计算与语言
2020-10-01 v1
摘要
我们提出一种基于音乐音频条件生成新颖歌词行的系统。一个双模态神经网络模型学习基于任意给定短音频片段条件生成歌词行。该模型由频谱图变分自编码器(VAE)与文本VAE组成。自动与人工评估均表明,我们的模型在生成与给定音频片段情感冲击相匹配的歌词行方面有效。该系统旨在作为词曲作者的创意工具。
引用
@article{arxiv.2009.14375,
title = {Generation of lyrics lines conditioned on music audio clips},
author = {Olga Vechtomova and Gaurav Sahu and Dhruv Kumar},
journal= {arXiv preprint arXiv:2009.14375},
year = {2020}
}
备注
Accepted to First Workshop on NLP for Music and Audio (NLP4MusA) at ISMIR 2020