中文

勾勒表达:基于自监督学习的柔性钢琴演奏表情渲染

声音 2022-09-07 v2 多媒体 音频与语音处理

摘要

我们提出一种以柔性音乐表情渲染符号化钢琴演奏的系统。为创作传达多样情感或细微差别的新音乐表演,主动控制音乐表情是必要的。然而,以往方法局限于遵循作曲家的音乐表情指示,或仅处理部分音乐属性。我们旨在利用条件 VAE 框架解耦钢琴演奏的整体音乐表情与结构属性。它从潜表示与给定音符结构随机生成表情参数。此外,我们采用自监督方法迫使潜变量表征目标属性。最后,我们利用两步编码器与解码器学习层次依赖以增强输出的自然度。实验结果表明,我们的系统能稳定生成与给定乐谱相关的演奏参数,学习解耦表征,并相互独立地控制音乐属性。

关键词

引用

@article{arxiv.2208.14867,
  title  = {Sketching the Expression: Flexible Rendering of Expressive Piano Performance with Self-Supervised Learning},
  author = {Seungyeon Rhyu and Sarah Kim and Kyogu Lee},
  journal= {arXiv preprint arXiv:2208.14867},
  year   = {2022}
}

备注

8 pages, 4 figures, the 23rd International Society for Music Information Retrieval Conference, Bengaluru, India, 2022