中文

基于古筝演奏中音符起音信息融合的演奏技法检测

声音 2022-09-20 v1 人工智能 多媒体 音频与语音处理

摘要

古筝是一种具有多样演奏技法的中国传统乐器。乐器演奏技法(IPT)在音乐表演中起着重要作用。然而,现有多数 IPT 检测工作对变长音频效率低下,且因依赖单一音色库进行训练与测试而在泛化性上无保障。本研究提出一种使用全卷积网络的端到端古筝演奏技法检测系统,可应用于变长音频。由于每种古筝演奏技法作用于一个音符,我们训练专用的起音检测器将音频分割为若干音符,并将其预测与逐帧 IPT 预测相融合。融合时,我们在每个音符内逐帧累加 IPT 预测,并取每个音符内概率最高的 IPT 作为该音符的最终输出。我们构建了名为 GZ_IsoTech 的新数据集,来源于多个音色库与真实录音,用于古筝演奏分析。我们的方法在帧级准确率达 87.97%,音符级 F1 分数达 80.76%,大幅优于现有工作,表明所提方法在 IPT 检测中的有效性。

关键词

引用

@article{arxiv.2209.08774,
  title  = {Playing Technique Detection by Fusing Note Onset Information in Guzheng Performance},
  author = {Dichucheng Li and Yulun Wu and Qinyu Li and Jiahao Zhao and Yi Yu and Fan Xia and Wei Li},
  journal= {arXiv preprint arXiv:2209.08774},
  year   = {2022}
}

备注

Accepted to ISMIR 2022