中文

Musinger:面向远程音乐交互的可穿戴触觉显示器与触摸敏感面的通信

人机交互 2024-10-22 v1

摘要

本研究探讨了听觉与触觉体验在音乐触觉中的集成,聚焦于通过触摸方式增强音乐的感官维度。针对将听觉信号转化为有意义触觉反馈的空白提出了新方法,本研究引入了触摸敏感录音器和可穿戴触觉显示器,通过力传感器捕获音乐交互并将其转化为触觉感受。先前的研究表明了触觉反馈在增强音乐表达性方面的潜力,但在传递复杂音乐细微差异方面仍面临挑战。本方法旨在为听力障碍者提供音乐可访问性,深化数字音乐交互。实验结果显示,在无噪声情况下为 98%,有白噪声时为 93% 的旋律识别准确率,表明音乐信息的有效传递与感知。本研究结果凸显了触觉技术在跨感官鸿沟中的潜力,为音乐治疗、教育及远程音乐合作提供了重要意义,推动了音乐触觉和多感官技术应用的领域发展。

关键词

引用

@article{arxiv.2410.16202,
  title  = {Musinger: Communication of Music over a Distance with Wearable Haptic Display and Touch Sensitive Surface},
  author = {Miguel Altamirano Cabrera and Muhammad Haris Khan and Ali Alabbas and Luis Moreno and Issatay Tokmurziyev and Dzmitry Tsetserukou},
  journal= {arXiv preprint arXiv:2410.16202},
  year   = {2024}
}

备注

This paper has been accepted for publication at ROBIO 2024 conference