迈向基于想象语音的智能通信系统：元宇宙环境下的潜在应用
人机交互
2022-02-08 v3
摘要
元宇宙为虚拟世界中的人际交互提供了替代平台。由于虚拟平台在改变周围环境或化身外观方面限制甚少，它至少可作为反映人类思想乃至梦境的元宇宙世界平台。当其与当前脑机接口（BCI）技术（通过脑信号实现系统控制）相融合时，一种通过心智进行人际交互的新范式可在元宇宙环境下建立。近期BCI系统旨在利用脑信号提供用户友好且直观的通信手段。想象语音已成为通信型BCI的替代神经范式，因其直接依赖于人的语音产生过程，而非使用与语音无关的神经活动作为通信手段。本文提出一种利用脑信号实现现实世界智能通信的脑到语音（BTS）系统。此外，我们展示了通过虚拟助手进行基于想象语音的智能家居控制演示，这可成为脑-元宇宙系统的未来应用之一。我们使用九名受试者的想象语音脑电图数据进行伪在线分析，以探究虚拟BTS系统在现实中的潜在用途。在十三类与二分类伪在线分析中，分别获得了46.54%（随机水平=7.7%）与75.56%（随机水平=50%）的平均准确率。我们的结果支持了基于想象语音的智能通信应用于元宇宙世界的潜力。
引用
@article{arxiv.2112.08569,
title = {Toward Imagined Speech based Smart Communication System: Potential Applications on Metaverse Conditions},
author = {Seo-Hyun Lee and Young-Eun Lee and Seong-Whan Lee},
journal= {arXiv preprint arXiv:2112.08569},
year = {2022}
}
备注
Submitted to 2022 10th IEEE International Winter Conference on Brain-Computer Interface