中文

感知呼吸:一种带呼吸引导的多模态歌唱教学界面

人机交互 2022-07-06 v2

摘要

呼吸是歌唱表演中的重要组成部分,但在大多数歌唱相关音乐界面中仍研究不足。本文提出一种多模态系统,可检测学习者的歌唱音高与呼吸状态,并提供实时视觉教学反馈。具体而言,呼吸检测器是一条带有压力传感器与柔性织物的可穿戴腰带,监测腹部、后腰与双侧肋骨的实时身体运动。我们开发了呼吸可视化算法,在交互式乐谱界面上显示实时呼吸状态及歌唱音高轮廓。用户研究表明,我们的系统不仅能帮助用户歌唱时获得更深的呼吸,还能提升声乐训练中的音高准确度,尤其对有若干音乐背景者。

关键词

引用

@article{arxiv.2202.01439,
  title  = {Sensing the Breath: A Multimodal Singing Tutoring Interface with Breath Guidance},
  author = {Ziyue Piao and Gus Xia},
  journal= {arXiv preprint arXiv:2202.01439},
  year   = {2022}
}

备注

New Interfaces for Musical Expression 2022 Demo Paper