声学场景复杂性与视觉场景表征对虚拟视听环境中听觉感知的影响
音频与语音处理
2021-11-30 v2 声音
摘要
在日常生活中，社会互动与声学交流常发生于具有多种干扰声与混响的复杂声学环境（CAE）中。出于生态效度的考虑，使用虚拟现实技术模拟 CAE 在听觉研究与听觉系统评估中日益受到关注。本研究考察了在虚拟视听环境中，场景复杂性与场景视觉表征对声源定位、距离感知、响度、语音可懂度及聆听努力等心理声学度量的影响。采用三维 86 声道扬声器阵列渲染声场，并配合或不配合头戴式显示器（HMD）以创建沉浸式的立体视觉场景表征。场景由一圈八个（虚拟）扬声器组成，在不同空间条件下播放目标语音刺激与无意义语音干扰声。模拟了消声环境（雪地户外场景）或混响环境（阁楼公寓），其混响时间（T60）约为 1.5 s。除改变干扰声数量外，场景复杂性通过在隔离的连续测量中或同时评估心理声学度量来变化。结果显示佩戴 HMD 对数据无显著影响。当响度与距离感知在同时测量而非隔离连续测量时，结果存在显著差异。所提设置的优势在于可直接迁移至相应的真实房间，从而实现对真实与虚拟环境中感知实验的 1:1 比较与验证。
引用
@article{arxiv.2106.15909,
title = {Effect of acoustic scene complexity and visual scene representation on auditory perception in virtual audio-visual environments},
author = {Stefan Fichna and Thomas Biberger and Bernhard U. Seeber and Stephan D. Ewert},
journal= {arXiv preprint arXiv:2106.15909},
year = {2021}
}
备注
Accepted publication in Proceedings of 3DA 2021 International Conference on Immersive and 3D Audio