Sing-On-Your-Beat：基于文本控制的简单伴奏生成
声音
2024-11-14 v2 人工智能
音频与语音处理
摘要
唱歌是人类最珍视的娱乐形式之一。然而，创作一首优美的歌曲需要能够衬托人声并与歌曲乐器和风格良好契合的伴奏。随着深度学习的进步，以往的研究侧重于生成合适的伴奏，但往往缺乏与期望乐器编配和风格的精确对齐。为了解决这一问题，我们提出了一种直观的方法，通过文本提示实现对伴奏的控制，从而生成既衬托人声又符合歌曲乐器编配和风格要求的音乐。通过大量实验，我们成功利用人声输入和文本控制生成了 10 秒的伴奏。
引用
@article{arxiv.2411.01661,
title = {Sing-On-Your-Beat: Simple Text-Controllable Accompaniment Generations},
author = {Quoc-Huy Trinh and Minh-Van Nguyen and Trong-Hieu Nguyen Mau and Khoa Tran and Thanh Do},
journal= {arXiv preprint arXiv:2411.01661},
year = {2024}
}