A2D:随时随地击鼓
人机交互
2023-07-04 v2 声音
音频与语音处理
摘要
架子鼓仅存在了约 100 年,却是流行乐、摇滚乐和爵士乐等众多音乐流派中的流行乐器。然而,拥有一套架子鼓的门槛很高,无论是在资金还是空间方面。此外,与其他乐器相比,架子鼓更难移动,因为它们无法装入单个包中。我们提出了一种无鼓方案,仅使用两根鼓槌和一部智能手机或网络摄像头即可提供空气击鼓体验。该检测算法结合了深度学习工具与追踪方法,以增强用户体验。基于包含人类在环的定量和定性测试,我们表明我们的系统在初级水平演奏中零失误,在高级水平演奏中失误可忽略不计。此外,我们有限的人类试验为未来的研究指明了潜在方向。
引用
@article{arxiv.2304.03289,
title = {A2D: Anywhere Anytime Drumming},
author = {Harel Yadid and Almog Algranti and Mark Levin and Ayal Taitler},
journal= {arXiv preprint arXiv:2304.03289},
year = {2023}
}