面向雷达的语音产生模型：连接语音声学与雷达测量振动
音频与语音处理
2025-03-21 v1 信号处理
摘要
毫米波 (mmWave) 雷达已成为语音感知的有前景模态，相较于传统麦克风具有优势。先前的工作表明雷达捕获与声带振动相关的运动信号，但在雷达测量振动与语音声学之间的分析性联系上存在知识鸿沟。我们建立了数学框架，将雷达捕获的颈部振动与语音声学建立联系。我们推导了颈部表面位移与语音之间的解析关系。我们使用来自 66 名人类的数据，并通过统计谱距离分析来实证评估该模型。我们的结果表明，雷达测量信号与我们从语音中推导的经模型滤波振动信号更吻合，而与原始语音本身则不吻合。这些发现为改进基于雷达的语音处理提供了基础，适用于语音增强、编码、监视和身份验证等应用。
引用
@article{arxiv.2503.15627,
title = {A Speech Production Model for Radar: Connecting Speech Acoustics with Radar-Measured Vibrations},
author = {Isabella Lenz and Yu Rong and Daniel Bliss and Julie Liss and Visar Berisha},
journal= {arXiv preprint arXiv:2503.15627},
year = {2025}
}
备注
5 pages, 6 figure, InterSpeech Conference