感官替代中距离声化并非总改善定位:与2D及3D手持设备的比较
人机交互
2022-04-14 v1
摘要
早期的视觉到听觉替代设备将2D单目图像编码为声音,而较新的设备利用来自3D传感器的距离信息。本研究评估近期系统中增加声音编码距离是否有助于传达“何处”信息。这对新型感官替代设备的设计十分重要。我们使用手持视觉到听觉替代系统进行物体定位与导航任务实验。该系统包含2D与3D两种模式。两者均实时编码相机所捕获图像中物体的位置。3D模式额外编码系统与物体间的距离。实验由16名蒙眼视力正常参与者完成。在定位任务中,参与者使用编码距离的3D模式更快理解场景。另一方面,仅用2D模式时,他们在少量训练后便能补偿距离编码的缺失。在导航任务中,参与者仅用2D模式的表现与编码距离的3D模式相当。
引用
@article{arxiv.2204.06063,
title = {Sonified distance in sensory substitution does not always improve localization: comparison with a 2D and 3D handheld device},
author = {Louis Commère and Jean Rouat},
journal= {arXiv preprint arXiv:2204.06063},
year = {2022}
}
备注
14 pages, 9 figures