TunesFormer：通过小节修补与控制码生成爱尔兰曲调
声音
2023-12-13 v3 音频与语音处理
摘要
本文介绍 TunesFormer，一种高效的基于 Transformer 的双解码器模型，专为生成符合用户定义音乐形式的旋律而设计。TunesFormer 在 214,122 首爱尔兰曲调上训练，使用了包括小节修补（bar patching）和控制码在内的技术。小节修补减少了序列长度和生成时间，而控制码引导 TunesFormer 生成符合期望音乐形式的旋律。我们的评估表明，TunesFormer 具有优越的效率，比 GPT-2 快 3.22 倍，比同等规模线性复杂度模型快 1.79 倍，同时在可控性和其他指标上提供可比性能。TunesFormer 为音乐家、作曲者和音乐爱好者提供了一种探索爱尔兰音乐广阔领域的新型工具。我们的模型和代码可在 https://github.com/sander-wood/tunesformer 获取。
引用
@article{arxiv.2301.02884,
title = {TunesFormer: Forming Irish Tunes with Control Codes by Bar Patching},
author = {Shangda Wu and Xiaobing Li and Feng Yu and Maosong Sun},
journal= {arXiv preprint arXiv:2301.02884},
year = {2023}
}
备注
6 pages, 1 figure, 1 table, accepted by HCMIR 2023