神经鼓机:一种用于鼓声实时合成的交互系统
声音
2019-11-14 v2 机器学习
音频与语音处理
摘要
本工作中,我们介绍一种用于鼓声实时生成的系统。该系统由两部分组成:鼓声生成模型,以及提供对生成过程直观控制的Max4Live插件。生成模型由一个条件Wasserstein自编码器(CWAE)组成,其学习生成短打击样本的对数梅尔尺度幅度谱图,并耦合一个多头卷积神经网络(MCNN)从幅度谱图估计相应音频信号。该模型的设计轻量,使其能在普通CPU上实时生成新颖鼓声,用户无需专用硬件即可使用本系统。随后我们展示为与该生成模型交互设计的Max4Live界面。借助此设置,系统可轻松集成进工作室制作环境并增强创作过程。最后,我们讨论系统的优势以及音乐制作人与此类工具的交互将如何改变鼓轨创作方式。
引用
@article{arxiv.1907.02637,
title = {Neural Drum Machine : An Interactive System for Real-time Synthesis of Drum Sounds},
author = {Cyran Aouameur and Philippe Esling and Gaëtan Hadjeres},
journal= {arXiv preprint arXiv:1907.02637},
year = {2019}
}
备注
8 pages, accepted at the International Conference on Computational Creativity 2019