基于 BERT 的音乐表征系统性分析
声音
2023-06-08 v1 多媒体
音频与语音处理
摘要
已有大量尝试将原始数据表示为能有效捕捉语义与上下文信息的数值向量。然而,在符号音乐领域,以往工作试图通过观察各类微调任务性能提升来验证其音乐嵌入。本工作中,我们直接分析在小节级 MIDI 上训练的 BERT 及带对比学习的 BERT 的嵌入,考察其可从 MIDI 事件中获取的音乐信息。我们观察到,嵌入所呈现的信息特征因对比学习目标与层的选择而异。我们的代码见 https://github.com/sjhan91/MusicBERT。
引用
@article{arxiv.2306.04628,
title = {Systematic Analysis of Music Representations from BERT},
author = {Sangjun Han and Hyeongrae Ihm and Woohyung Lim},
journal= {arXiv preprint arXiv:2306.04628},
year = {2023}
}