自动神经歌词与旋律生成
声音
2020-11-13 v1 计算与语言
音频与语音处理
摘要
在本文中，我们提出一种技术来解决算法作曲过程中最具挑战性的方面，使人类能够发现原创歌词以及适合所生成歌词的旋律。所提出的作曲系统 Automatic Neural Lyrics and Melody Composition (AutoNLMC) 是一种利用人工神经网络使整个作曲过程自动化的尝试。我们的 lyric to vector (lyric2vec) 模型在大量音节、词和句子级别解析的歌词-旋律对数据集上训练，是大规模嵌入模型，使我们能够训练用于流行英文歌曲的循环神经网络等数据驱动模型。AutoNLMC 是一个编码器-解码器序列循环神经网络模型，由歌词生成器、歌词编码器和旋律解码器端到端训练而成。AutoNLMC 旨在为业余者或没有音乐知识的人自动生成歌词及相应旋律。它也可以接受专业作词人的歌词来生成匹配的旋律。定性与定量评估表明，所提方法确实能够生成原创歌词及相应旋律以创作新歌。
引用
@article{arxiv.2011.06380,
title = {Automatic Neural Lyrics and Melody Composition},
author = {Gurunath Reddy Madhumani and Yi Yu and Florian Harscoët and Simon Canales and Suhua Tang},
journal= {arXiv preprint arXiv:2011.06380},
year = {2020}
}
备注
15 pages