利用基于 Transformer 编码器的 EEG 编码器和 GAN 从 EEG 记录生成视觉刺激
人工智能
2024-11-21 v2 机器学习
信号处理
神经元与认知
摘要
在本研究中，我们应对感知脑解码领域的一个现代研究挑战，该挑战围绕利用对抗性深度学习框架从脑电图（EEG）信号合成图像。具体目标是通过利用受试者观看图像时获得的 EEG 记录，重建属于各种物体类别的图像。为此，我们采用基于 Transformer 编码器的 EEG 编码器来生成 EEG 编码，将其作为 GAN 网络生成器组件的输入。除了对抗损失外，我们还引入了感知损失以提高生成图像的质量。
引用
@article{arxiv.2402.10115,
title = {Generating Visual Stimuli from EEG Recordings using Transformer-encoder based EEG encoder and GAN},
author = {Rahul Mishra and Arnav Bhavsar},
journal= {arXiv preprint arXiv:2402.10115},
year = {2024}
}