中文

ALIGN:面向可泛化语音神经植入的对抗学习

机器学习 2026-03-20 v1 神经与进化计算 声音

摘要

内侧电极脑机接口(BCI)可在跨录制会话汇聚数据后实现高精度语音解码。然而,在现实部署中,模型必须在无标签数据的情况下泛化到新会话,性能常因跨会话非平稳性(如电极漂移、神经细胞更新及用户策略变化)而下降。本文提出ALIGN,一套基于多域对抗神经网络的会话不变学习框架,用于半监督跨会话适应。ALIGN训练一个特征编码器,联合训练音素分类器和域分类器,后者在潜在表示上运行。通过对抗优化,编码器被鼓励保留任务相关信息,同时抑制会话特定线索。我们在内侧电极语音解码上进行评估,发现ALIGN持续显著优于基线方法,提升音素错误率和词错误率。结果表明,对抗域对齐是缓解会话级分布迁移、实现稳健纵向BCI解码的有效方法。

关键词

引用

@article{arxiv.2603.18299,
  title  = {ALIGN: Adversarial Learning for Generalizable Speech Neuroprosthesis},
  author = {Zhanqi Zhang and Shun Li and Bernardo L. Sabatini and Mikio Aoi and Gal Mishne},
  journal= {arXiv preprint arXiv:2603.18299},
  year   = {2026}
}