中文

PiAnnotate:用于钢琴指法的 Web 注释工具,带诊断探针

声音 2026-05-26 v1

摘要

钢琴指法决定了乐段的演奏方式,但演后标注困难。注释者必须在协调记谱、 Timing、视频和手部动作的同时,决定每个音符由哪根手指产生。我们 presented PiAnnotate,一个用于向 FurElise 演奯数据集添加专家指法注释的 Web 管道。该工具将钢琴卷帘视图、演奏视频和 3D MANO 手部网格结合起来,使审阅者能够在音乐和物理语境中检查每个分配。在仅存储最终答案的基础上,PiAnnotate 保存了配对的基于规则和人工编辑的指法轨迹。这些配对轨迹通过显示几何规则何时足够、专家何时干预、以及标签在审阅 passes 中如何变化,使注释历史可审计。作为最终诊断,我们在配对轨迹上训练一个小型 Transformer 探针。该探针在 held-out 乐章上优于规则基线,同时对已经正确的标签保持保守,这表明编辑后的标签包含可学习的结构,而不仅仅是孤立的修正。

关键词

引用

@article{arxiv.2605.23982,
  title  = {PiAnnotate: A Web Annotation Tool for Piano Fingering, with a Diagnostic Probe},
  author = {Joonhyung Bae and Kirak Kim and Hyeyoon Cho and Sein Lee and Yoon-Seok Choi and Hyeon Hur and Gyubin Lee and Akira Maezawa and Jonghwa Park and Jaebum Park and Juhan Nam},
  journal= {arXiv preprint arXiv:2605.23982},
  year   = {2026}
}