可微数字信号处理在音乐与语音合成中的研究综述
声音
2023-08-30 v1 音频与语音处理
摘要
“可微数字信号处理”描述了一类将损失函数梯度通过数字信号处理器反向传播、从而促进其集成至神经网络的技术。本文综述可微音频信号处理文献,聚焦其在音乐与语音合成中的使用。我们编录了其在音乐演奏渲染、声音匹配与嗓音转换等任务中的应用,讨论了采用该方法学的动机与影响。随之附以已实现可微化的数字信号处理操作概览。最后,我们强调开放性挑战,包括优化病态、对真实世界条件的鲁棒性以及设计权衡,并探讨未来研究方向。
引用
@article{arxiv.2308.15422,
title = {A Review of Differentiable Digital Signal Processing for Music & Speech Synthesis},
author = {Ben Hayes and Jordie Shier and György Fazekas and Andrew McPherson and Charalampos Saitis},
journal= {arXiv preprint arXiv:2308.15422},
year = {2023}
}
备注
Under review for Frontiers in Signal Processing