Pop2Piano：基于流行音乐音频的钢琴翻奏生成
声音
2023-04-04 v2 机器学习
音频与语音处理
摘要
流行音乐的钢琴翻奏受到许多人的喜爱。然而，自动生成流行音乐钢琴翻奏的任务仍研究不足。这部分是由于缺乏同步的{流行音乐, 钢琴翻奏}数据对，使得应用最新的数据密集型深度学习方法颇具挑战。为利用数据驱动方法的优势，我们通过自动化流程制作了大量成对的同步{流行音乐, 钢琴翻奏}数据。本文提出 Pop2Piano，一种在给定流行音乐波形时生成钢琴翻奏的 Transformer 网络。据我们所知，这是首个无需使用旋律与和弦提取模块、直接从流行音乐音频生成钢琴翻奏的模型。我们表明，用我们的数据集训练的 Pop2Piano 能够生成合理的钢琴翻奏。
引用
@article{arxiv.2211.00895,
title = {Pop2Piano : Pop Audio-based Piano Cover Generation},
author = {Jongho Choi and Kyogu Lee},
journal= {arXiv preprint arXiv:2211.00895},
year = {2023}
}