SoundShift：探索面向无障碍混合现实感知的声音操控
人机交互
2024-05-28 v2 声音
音频与语音处理
摘要
混合现实（MR）声景将真实世界声音与来自听觉设备的虚拟音频相融合，呈现出难以辨别和区分的复杂听觉信息。这对于在日常生活中依赖声音和描述的盲人或视障人士而言尤为困难。为了解复杂音频信息是如何被消费的，我们分析了盲人社区内的在线论坛帖子，识别出了普遍存在的挑战、需求和期望的解决方案。我们综合了这些结果，并提出了用于增强 MR 声音感知的 SoundShift，它包含六种声音操控方式：透明度偏移、包络偏移、位置偏移、风格偏移、时间偏移和声音附加。为了评估 SoundShift 的有效性，我们在三个模拟的 MR 场景中对 18 名盲人参与者进行了用户研究，参与者在复杂的声景中识别特定声音。我们发现 SoundShift 提高了 MR 声音感知能力并降低了认知负荷。最后，我们开发了三个真实世界的示例应用来展示 SoundShift 的实用性。
引用
@article{arxiv.2401.11095,
title = {SoundShift: Exploring Sound Manipulations for Accessible Mixed-Reality Awareness},
author = {Ruei-Che Chang and Chia-Sheng Hung and Bing-Yu Chen and Dhruv Jain and Anhong Guo},
journal= {arXiv preprint arXiv:2401.11095},
year = {2024}
}
备注
DIS 2024