脑之声:基于 EEG 的想象语音、外显语音与语音感知的认知表征
人机交互
2021-06-01 v1
摘要
每个人都有自己独特的声音,同样,脑信号也为每个个体呈现出不同的神经表征。尽管近期研究揭示了语音相关范式对于高效脑机接口(brain-computer interface)的稳健性,但其认知表征在实际可用性上的差异仍有待探索。在此,我们基于单通道 EEG 的说话人识别实际应用,从受试者差异的角度研究了想象语音、外显语音与语音感知过程中脑电图(electroencephalography, EEG)所呈现的不同脑模式。我们使用深度神经网络对九名受试者进行分类,该网络从想象语音、外显语音与语音感知的 EEG 中捕捉时-频-空特征。此外,我们通过比较功能连接与 EEG 包络特征,展示了受试者在执行想象语音时的潜在神经特征。我们的结果表明,从想象语音与外显语音的单通道 EEG 中进行受试者识别是可行的。同时,这三种语音相关范式的比较将为后续研究中语音相关脑信号的实际应用提供有价值的信息。
引用
@article{arxiv.2105.14787,
title = {Voice of Your Brain: Cognitive Representations of Imagined Speech,Overt Speech, and Speech Perception Based on EEG},
author = {Seo-Hyun Lee and Young-Eun Lee and Seong-Whan Lee},
journal= {arXiv preprint arXiv:2105.14787},
year = {2021}
}
备注
5 pages, 6 figures, 1 table