感知呼吸:一种带呼吸引导的多模态歌唱教学界面
人机交互
2022-07-06 v2
摘要
呼吸是歌唱表演中的重要组成部分,但在大多数歌唱相关音乐界面中仍研究不足。本文提出一种多模态系统,可检测学习者的歌唱音高与呼吸状态,并提供实时视觉教学反馈。具体而言,呼吸检测器是一条带有压力传感器与柔性织物的可穿戴腰带,监测腹部、后腰与双侧肋骨的实时身体运动。我们开发了呼吸可视化算法,在交互式乐谱界面上显示实时呼吸状态及歌唱音高轮廓。用户研究表明,我们的系统不仅能帮助用户歌唱时获得更深的呼吸,还能提升声乐训练中的音高准确度,尤其对有若干音乐背景者。
引用
@article{arxiv.2202.01439,
title = {Sensing the Breath: A Multimodal Singing Tutoring Interface with Breath Guidance},
author = {Ziyue Piao and Gus Xia},
journal= {arXiv preprint arXiv:2202.01439},
year = {2022}
}
备注
New Interfaces for Musical Expression 2022 Demo Paper