SACM:用于中文语音解码的 SEEG-音频对比匹配
人机交互
2025-05-27 v1 声音
音频与语音处理
摘要
构音障碍与无构音等言语障碍会严重损害患者的口头交流能力。语音解码脑机接口(BCI)通过将语音意图直接转化为口语单词,作为一种语音神经假体,提供了一种潜在的替代方案。本文报告了一种中文语音解码 BCI 的实验方案及相应的解码算法。在八名药物难治性癫痫患者执行单词朗读任务时,收集了其立体脑电图(SEEG)与同步音频数据。所提出的 SEEG 与音频对比匹配(SACM)是一种基于对比学习的框架,在语音检测与语音解码任务中均取得了显著高于随机水平的解码准确率。逐电极分析表明,单一感觉运动皮层电极即可取得与全电极阵列相当的性能。这些发现为开发更准确的在线语音解码 BCI 提供了有价值的见解。
引用
@article{arxiv.2505.19652,
title = {SACM: SEEG-Audio Contrastive Matching for Chinese Speech Decoding},
author = {Hongbin Wang and Zhihong Jia and Yuanzhong Shen and Ziwei Wang and Siyang Li and Kai Shu and Feng Hu and Dongrui Wu},
journal= {arXiv preprint arXiv:2505.19652},
year = {2025}
}