MelodyVis:面向乐谱中旋律模式的视觉分析
人机交互
2024-07-09 v1 信息检索
摘要
手动旋律检测是一项需要高专业水平的繁琐任务,而自动检测往往不够表达力或强大。因此,我们提出了MelodyVis,一个与音乐学专家合作设计的视觉应用程序,用于探索数字乐谱中的旋律模式。MelodyVis具有五个相互关联的视图,包括一个旋律算子图和一个声部时间线。该系统利用八个原子算子,如移调和镜像,来捕捉旋律的重复和变奏。用户可以通过在乐谱视图中手动选择模式开始分析,然后通过交互式探索过程,基于所选样本识别其他模式。我们进行了一项用户研究,以调查我们的方法及其集成的旋律算子的有效性和实用性,包括可用性和心理负荷问题。我们比较了25名参与者在有和没有算子情况下执行的分析。研究结果表明,参与者使用激活的算子能够识别出至少两倍的模式。MelodyVis允许分析师引导分析过程并解释结果。我们的研究也证实了MelodyVis在支持旋律分析中常见分析任务方面的有用性,参与者报告说模式识别和解释能力得到了改善。因此,MelodyVis解决了全自动方法的局限性,使音乐分析师能够介入分析过程,发现并理解乐谱中复杂的旋律模式和变换。
引用
@article{arxiv.2407.05427,
title = {MelodyVis: Visual Analytics for Melodic Patterns in Sheet Music},
author = {Matthias Miller and Daniel Fürst and Maximilian T. Fischer and Hanna Hauptmann and Daniel Keim and Mennatallah El-Assady},
journal= {arXiv preprint arXiv:2407.05427},
year = {2024}
}
备注
9+2 pages, 9 figures, preprint, originally submitted to IEEE VIS 23, revision