看见声音,听见形状:一项评估声音草图的游戏化研究
多媒体
2022-05-19 v1 声音
音频与语音处理
摘要
声音-形状关联是听觉与视觉领域之间跨模态关联的一个子集,以往主要在将一组特意设计的形状与声音相匹配的情境中被研究。近期研究探索了人类如何通过自由形式草图来表征声音,以及图形草图输入如何可用于声音生成。本文通过一项在两次在线展览活动中与八十二名参与者进行的游戏化研究,考察了通过这些自由形式草图传达声音特征的潜力。结果表明,参与者识别声音的成功率高于随机基线所暗示的水平,然而在视觉上编码细微的音色差异似乎十分困难。
引用
@article{arxiv.2205.08866,
title = {Seeing Sounds, Hearing Shapes: a gamified study to evaluate sound-sketches},
author = {Sebastian Löbbers and György Fazekas},
journal= {arXiv preprint arXiv:2205.08866},
year = {2022}
}
备注
Accepted at International Computer Music Conference (ICMC) 2022