中文

MusicGen-Chord:通过和弦进行和交互式网页界面推进音乐生成

声音 2024-12-03 v1 人工智能 机器学习 音频与语音处理

摘要

MusicGen 是一种可基于文本描述和旋律特征进行条件生成的音乐生成语言模型。我们引入的 MusicGen-Chord 通过融合和弦进行特征,扩展了这一能力。该模型将修改后的单热编码旋律色谱向量转化为多热编码和弦色谱向量,从而实现能够同时反映和弦进行和文本描述的音乐生成。此外,我们开发了 MusicGen-Remixer,这是一个利用 MusicGen-Chord 根据文本描述生成输入音乐 remix 的应用。两个模型均集成到 Replicate 的网页界面中,采用 cog 实现,从而便于广泛访问和用户友好可控的交互式创作和体验 AI 生成的音乐。

关键词

引用

@article{arxiv.2412.00325,
  title  = {MusicGen-Chord: Advancing Music Generation through Chord Progressions and Interactive Web-UI},
  author = {Jongmin Jung and Andreas Jansson and Dasaem Jeong},
  journal= {arXiv preprint arXiv:2412.00325},
  year   = {2024}
}

备注

Late-breaking/demo (LBD) at ISMIR 2024. https://ismir2024program.ismir.net/lbd_424.html