从看见到记住：表征更难重建的图像留下更强的记忆痕迹
神经元与认知
2023-02-22 v1 机器学习
摘要
我们记忆的内容大多并非出于有意选择，而仅仅是感知的副产品。这提出了一个关于心智架构的根本问题：感知如何与记忆接口并影响其？受将感知加工与记忆持久性相关联的经典理论——加工水平理论——的启发，我们在此提出一种用于压缩图像特征嵌入的稀疏编码模型，并表明该模型的重建残差可预测图像被编码进记忆的好坏。在一个开放的场景图像记忆性数据集中，我们显示重建误差不仅解释记忆准确性，还解释提取时的响应潜伏期，且在后者中囊括了强大纯视觉模型所解释的全部方差。我们还通过“模型驱动的心理物理学”证实了该解释的一个预测。本工作确立重建误差为接口感知与记忆的新信号，可能通过感知加工的自适应调制实现。
引用
@article{arxiv.2302.10392,
title = {From seeing to remembering: Images with harder-to-reconstruct representations leave stronger memory traces},
author = {Qi Lin and Zifan Li and John Lafferty and Ilker Yildirim},
journal= {arXiv preprint arXiv:2302.10392},
year = {2023}
}