HARP 2.0:扩展 DAW 中深度学习的托管、异步、远程处理
音频与语音处理
2025-03-06 v1 机器学习
摘要
HARP 2.0 通过托管、异步、远程处理将深度学习模型带入数字音频工作站(DAW)软件,允许用户从插件界面路由音频,通过任何兼容的 Gradio 端点执行任意转换。HARP 在插件中渲染端点定义的控制和处理后的音频,这意味着用户无需离开 DAW 即可探索各种前沿深度学习模型。在 2.0 版本中,我们引入了对基于 MIDI 的模型和音频/MIDI 标注模型的支持,为模型开发者提供了精简的 pyharp Python API,并实现了众多界面和稳定性改进。通过这项工作,我们希望弥合模型开发者与创意人员之间的差距,通过将深度学习模型无缝集成到 DAW 工作流中来改善其可访问性。
引用
@article{arxiv.2503.02977,
title = {HARP 2.0: Expanding Hosted, Asynchronous, Remote Processing for Deep Learning in the DAW},
author = {Christodoulos Benetatos and Frank Cwitkowitz and Nathan Pruyne and Hugo Flores Garcia and Patrick O'Reilly and Zhiyao Duan and Bryan Pardo},
journal= {arXiv preprint arXiv:2503.02977},
year = {2025}
}
备注
ISMIR 2024 Late-Breaking Demo