从脑电图预测视频特征及其反向预测
计算机视觉与模式识别
2020-05-25 v1 机器学习
信号处理
摘要
本文探索了利用深度学习模型从脑电图（EEG）特征预测面部或唇部视频特征，以及从记录的面部或唇部视频帧预测 EEG 特征。受试者被要求大声朗读显示在计算机屏幕上的英文句子，同时记录他们的 EEG 信号和面部视频帧。我们的模型能够从输入的 EEG 特征生成面部或唇部视频帧的非常广泛的特性。我们的结果展示了从记录的 EEG 特征合成高质量面部或唇部视频的第一步。我们展示了一个包含七名受试者的数据集的结果。
引用
@article{arxiv.2005.11235,
title = {Predicting Video features from EEG and Vice versa},
author = {Gautam Krishna and Co Tran and Mason Carnahan and Ahmed Tewfik},
journal= {arXiv preprint arXiv:2005.11235},
year = {2020}
}
备注
under review