基于高斯信道的深层低时延联合语音传输与增强
音频与语音处理
2024-05-01 v1 声音
摘要
在低时延场景下，确保听力辅助设备的语音可理解性在语音增强、编码和传输方面面临着显著挑战。本文提出了 novel 的低时延联合语音传输与增强解决方案，利用深度神经网络（DNN）。我们的方法将两种用于低时延语音增强和低时延类比联合源信道传输的先进 DNN 架构集成在一起，创建了一个联合的低时延系统，并以端到端方式联合训练两个系统。由于增强系统的计算需求较大，这种顺序在解码器计算资源有限的情况下（如听力辅助设备）非常合适。该系统可配置总时延，在时延降至3毫秒（通常较难实现）时仍能实现高性能。仿真结果表明，联合增强与传输系统在多样化的无线信道条件、不同时延和背景噪声情形下，优于简单的串联系统。
引用
@article{arxiv.2404.19375,
title = {Deep low-latency joint speech transmission and enhancement over a gaussian channel},
author = {Mohammad Bokaei and Jesper Jensen and Simon Doclo and Jan Østergaard},
journal= {arXiv preprint arXiv:2404.19375},
year = {2024}
}