中文

用于视觉到听觉感官替代的短距深度听觉化评估

人机交互 2023-04-13 v1

摘要

视觉到听觉感官替代设备将视觉信息转换为声音,可为盲人提供宝贵辅助。这些设备的最新迭代依赖于深度传感器。将深度转换为声音(即听觉化)的规则常任意设计,缺乏选择某一规则优于另一规则的强证据。本工作的目的是比较并理解五种深度听觉化的有效性,以辅助未来依赖深度传感器的盲人视觉到听觉系统的设计过程。研究了声音的频率、振幅与混响,以及短促高音的重复率和纯音与噪声混合的信噪比。我们对二十八名蒙眼 sighted 参与者进行了定位实验。第一阶段包含学习阶段,随后是深度估计任务。第二阶段在第一阶段协议基础上增加了方位角估计的挑战。第三阶段通过在前测深度估计前插入 10 分钟休息来测试学习保持。第一阶段中最佳深度估计由声音频率与哔声重复率获得。第二阶段中,哔声重复率产生了最佳深度估计,且方位角估计未观察到显著差异。第三阶段结果显示哔声重复率是最易记忆的听觉化。基于结果的统计分析,我们讨论了每种听觉化的有效性,并与其他将深度编码为声音的研究进行比较。最后我们提供了深度编码设计的建议。

关键词

引用

@article{arxiv.2304.05462,
  title  = {Evaluation of short range depth sonifications for visual-to-auditory sensory substitution},
  author = {Louis Commère and Jean Rouat},
  journal= {arXiv preprint arXiv:2304.05462},
  year   = {2023}
}