中文

Algonauts 2023 项目挑战赛:UARK-UAlbany 团队方案

计算机视觉与模式识别 2023-08-02 v1

摘要

本工作介绍了我们针对 Algonauts 2023 项目挑战赛的解决方案。该挑战赛的主要目标在于运用计算模型来预测受试者在观看复杂自然视觉场景时所记录的大脑响应。其目标是预测整个视觉脑区的大脑响应,因为该区域是对图像观测到的最可靠响应的区域。我们通过一个两步训练过程构建了一个基于图像的脑编码器以应对此挑战。首先,我们利用所有受试者的数据创建了一个预训练编码器。接着,我们对各个受试者进行微调。每一步都采用了不同的训练策略,例如不同的损失函数与目标,以引入多样性。最终,我们的方案构成了多个独特编码器的集成。代码可在 https://github.com/uark-cviu/Algonauts2023 获取。

关键词

引用

@article{arxiv.2308.00262,
  title  = {The Algonauts Project 2023 Challenge: UARK-UAlbany Team Solution},
  author = {Xuan-Bac Nguyen and Xudong Liu and Xin Li and Khoa Luu},
  journal= {arXiv preprint arXiv:2308.00262},
  year   = {2023}
}

备注

The Algonauts Project 2023 Challenge