中文

musicolors:连接声音与视觉以实现联觉创造性音乐体验

人机交互 2025-03-19 v1 多媒体

摘要

音乐可视化是一种重要的媒介,能够实现联觉体验并激发创作灵感。然而,以往的研究主要关注技术和理论方面,忽视了用户与音乐可视化的日常交互。这一差距凸显了研究音乐可视化如何影响用户在联觉创造性体验中的感受以及其发展方向的迫切需求。因此,我们开发了 musicolors,一个基于网页的实时音乐可视化库。此外,我们与作曲家、开发者和听众进行了定性用户研究,以探索他们如何使用 musicolors 来欣赏、获取灵感以及塑造音乐-视觉交互。结果表明,musicolors 通过音乐创意的草图绘制、将可视化与其他系统或平台集成以及联觉聆听,为用户提供了丰富的音乐可视化价值。基于这些发现,我们还为未来的音乐可视化提供了指导原则,以提供更互动和更具创造性的体验。

关键词

引用

@article{arxiv.2503.14220,
  title  = {musicolors: Bridging Sound and Visuals For Synesthetic Creative Musical Experience},
  author = {ChungHa Lee and Jin-Hyuk Hong},
  journal= {arXiv preprint arXiv:2503.14220},
  year   = {2025}
}

备注

16 pages, 2 figures, 1 table