有损语音编解码器对基于DNN的助听器双耳声源定位的影响
音频与语音处理
2023-06-06 v1
摘要
助听器通常配备多个麦克风，以利用空间信息进行声源定位和语音增强。特别是对于助听器而言，良好的声源定位十分重要：它不仅引导声源分离方法，还可用于增强空间线索，提高用户对周围重要事件的感知。我们使用最先进的深度神经网络（DNN）来执行双耳到达方向（DoA）估计，其中DNN利用双耳所有麦克风的信息。然而，助听器用于交换此类数据的带宽有限。蓝牙低功耗（BLE）正成为一种有吸引力的方案以促进此类数据交换，其LC3plus编解码器提供了多种比特率与延迟的权衡可能。本文研究了此类有损编解码器对定位精度的影响。具体而言，我们考虑两种条件：在一侧耳朵处理 vs 在中心点处理，这会影响需要编码的通道数量。性能以允许全音频交换的基线作为基准——从而对有损编码下DNN的使用提供了有价值的见解。我们还扩展了Pyroomacoustics库以包含助听设备与头部相关传输函数（HD-HRTFs），从而适当地训练网络。这也可惠及该领域的其他研究者。
引用
@article{arxiv.2306.02344,
title = {Influence of Lossy Speech Codecs on Hearing-aid, Binaural Sound Source Localisation using DNNs},
author = {Siyuan Song and Stijn Kindt and Jasper Maes and Alexander Bohlender. Nilesh Madhu},
journal= {arXiv preprint arXiv:2306.02344},
year = {2023}
}