基于语义标签的 CVAE 波表合成中的 timbre 控制
声音
2024-10-25 v1 人工智能
音频与语音处理
信号处理
摘要
合成器是现代音乐制作中必不可少的工具。然而，其复杂的 timbre 参数常常包含技术术语，需要专业知识才能掌握。本研究引入一种基于语义标签的波表合成 timbre 控制方法，该方法直观且易于理解。通过条件变分自编码器（CVAE），用户可以选择波表并使用诸如明亮、温暖、浓郁等标签来定义 timbre。该 CVAE 模型采用卷积和上采样层，有效捕捉波表的细微差别，由于在时域中处理，确保了实时性能。实验表明，该方法允许使用语义输入对波表的 timbre 进行实时、有效的控制，并旨在通过数据驱动的语义控制实现直观的 timbre 控制。
引用
@article{arxiv.2410.18628,
title = {Wavetable Synthesis Using CVAE for Timbre Control Based on Semantic Label},
author = {Tsugumasa Yutani and Yuya Yamamoto and Shuyo Nakatani and Hiroko Terasawa},
journal= {arXiv preprint arXiv:2410.18628},
year = {2024}
}
备注
6 pages, 4 figures, Accepted at APSIPA ASC 2024