关于不确定性的视听符号学的两项实证研究

在整合可视化与声化方面，目前缺乏理论指导。在本文中，我们通过研究用于不确定性表示的视听符号学来填补这一空白：将不确定性可视化与声化相结合，融合视听通道以增强用户对不确定性的感知。我们进行了两项预注册的众包用户研究。首先，我们评估了合适的音频/视觉配对。然后，我们研究了不确定性的视听映射。在此，我们使用概率，因为它是易于传达的不确定性方面。我们在两项用户研究中分析了参与者的偏好和反应时间。此外，我们通过定性分析探索了参与者采用的策略。我们的结果揭示了能够带来特别强烈偏好和低反应时间的视听映射。此外，我们发现受偏好的音频/视觉配对未必是合适的不确定性视听映射。例如，虽然音高与亮度的配对作为一对受到偏好，但它并不适合作为不确定性的映射。我们推荐在两项用户研究中均能带来低反应时间和高偏好的不确定性视听映射。本文为任何试图采用视听表示来表示不确定性的人提供了指南，有助于增强对不确定性的感知。