当显著性遇见情感：理解图像内容如何唤起情绪与情感

情感分析对于从社交媒体内容中提取社会信号至关重要。由于图像在社交媒体中的普遍性，图像情感分析近年来越来越受到关注。然而，大多数现有系统都是黑箱，无法揭示图像内容如何唤起观看者的情感和情绪。心理学研究已证实，图像中的显著物体常常唤起情绪。在这项工作中，我们研究了视觉显著性与视觉情感之间更细粒度、更全面的交互作用。具体而言，我们将图像按几个主要的场景类型维度进行划分，包括：开放-封闭、自然-人造、室内-室外、以及有人脸-无人脸。利用最先进的显著性检测算法和情感分类算法，我们考察了图像中显著区域的情感与图像整体情感之间的关系。在一个代表性图像情绪数据集上的实验显示了不同场景类型中显著性与情感之间有趣的相关性，进而揭示了视觉情感唤起的机制。