社交媒体中灾难图像的视觉情感分析

社交网络日益普及,且用户倾向于在文本、视觉和音频内容中分享其感受、表情与观点,这为情感分析带来了新的机遇与挑战。尽管文本流的情感分析已在文献中被广泛探索,图像与视频的情感分析则相对新颖。本文聚焦于一个具有社会重要性的领域中的视觉情感分析,即社交媒体中的灾难分析。为此,我们提出了一种面向灾难相关图像的深度视觉情感分析器,涵盖视觉情感分析的各个方面,从数据收集、标注、模型选择、实现到评估。对于数据标注及分析人们对自然灾害及社交媒体中相关图像的情感,我们开展了一项有全球大量参与者参与的众包研究。该众包研究产生了一个具有四组不同标注的大规模基准数据集,每组针对一项独立任务。所呈现的分析及关联数据集将为该领域的未来研究提供基线/基准。我们相信所提出的系统可通过帮助不同利益相关者(如新闻广播机构、人道主义组织以及普通公众)而为更宜居的社区作出贡献。