MeloForm：基于专家系统与神经网络的具有曲式的旋律生成
声音
2022-08-31 v1 计算与语言
机器学习
多媒体
音频与语音处理
摘要
人类通常根据曲式组织元素以表达音乐思想来创作音乐。然而，对于基于神经网络的音乐生成而言，由于缺乏曲式标注数据，难以做到这一点。本文中，我们开发了 MeloForm，一个利用专家系统与神经网络生成具有曲式的旋律的系统。具体而言，1）我们设计了一个专家系统，根据预先给定的曲式，通过从动机到乐句再到乐段并以重复与变奏进行发展来生成旋律；2）考虑到所生成旋律缺乏音乐丰富性，我们设计了一个基于 Transformer 的精修模型，在不改变其曲式的前提下改进旋律。MeloForm 兼具专家系统对曲式的精确控制与神经模型对音乐丰富性的学习的优势。主观与客观实验评估均表明，MeloForm 以 97.79% 的准确率生成具有精确曲式控制的旋律，并在结构、主题、丰富性与整体质量的主观评价分数上分别以 0.75、0.50、0.86 和 0.89 优于基线系统，且无需任何曲式标注数据。此外，MeloForm 可支持多种曲式，如主歌-副歌式、回旋曲式、变奏曲式、奏鸣曲式等。
引用
@article{arxiv.2208.14345,
title = {MeloForm: Generating Melody with Musical Form based on Expert Systems and Neural Networks},
author = {Peiling Lu and Xu Tan and Botao Yu and Tao Qin and Sheng Zhao and Tie-Yan Liu},
journal= {arXiv preprint arXiv:2208.14345},
year = {2022}
}