DDSP-SFX：基于可微数字信号处理的声学引导音效生成
音频与语音处理
2023-09-18 v1 声音
摘要
使用神经音频合成模型控制音效的变化一直是一项困难的任务。可微数字信号处理（DDSP）提供了一种轻量级解决方案，能够在实现高质量声音合成的同时，通过结合预处理音频特征与数字合成器来实现确定性的声学属性控制。在本研究中，我们提出 DDSP-SFX，一种基于 DDSP 架构的模型，能够合成高质量音效，同时让用户轻松控制音色变化。我们提出了一种瞬态建模技术，在脉冲信号（脚步声、枪声）上取得了更高的客观评价指标与主观评分。我们提出了一种简单方法，在实现音色变化控制的同时也允许确定性属性控制。我们进一步定性地展示了以人声作为引导声音的音色迁移性能。
引用
@article{arxiv.2309.08060,
title = {DDSP-SFX: Acoustically-guided sound effects generation with differentiable digital signal processing},
author = {Yunyi Liu and Craig Jin and David Gunawan},
journal= {arXiv preprint arXiv:2309.08060},
year = {2023}
}