基于人类视觉记忆图式生成令人难忘的图像
计算机视觉与模式识别
2020-05-07 v1
摘要
本研究提出使用结合人类可记忆性二维度量的生成对抗网络(GAN)来生成场景的令人难忘或不易记住的图像。生成图像的可记忆性通过建模视觉记忆图式(VMS)来评估,VMS对应于人类观察者在将图像编码入记忆时所使用的心理表征。VMS模型基于在人类观察者上进行的记忆实验结果,并提供可记忆性的二维映射。我们通过采用VMS映射预测模型作为辅助损失,对GAN的潜空间施加可记忆性约束。我们通过独立的可记忆性计算度量评估为可记忆或不可记忆而生成的图像间可记忆性的差异,并额外评估可记忆性对生成图像真实感的影响。
引用
@article{arxiv.2005.02969,
title = {Generating Memorable Images Based on Human Visual Memory Schemas},
author = {Cameron Kyle-Davidson and Adrian G. Bors and Karla K. Evans},
journal= {arXiv preprint arXiv:2005.02969},
year = {2020}
}