感知构图的图像美学评估
计算机视觉与模式识别
2019-07-26 v1
摘要
自动图像美学评估对于在线照片推荐、相册管理和图像检索等广泛应用十分重要。以往方法侧重于将整体图像内容映射为高或低的美学评分。然而，图像的构图信息根据艺术原则刻画了其视觉元素的和谐性，并为学习美学提供了更丰富的信息。本工作中，我们提出将图像构图信息建模为其局部区域间的相互依赖，并设计一种新颖架构来利用此类信息提升美学评估性能。为此，我们将图像密集划分为局部区域，并在各区域上计算保持美学的特征以刻画图像内容的美学属性。基于局部区域的特征表示，我们构建区域构图图，其中每个节点表示一个区域，任意两节点间由一条以区域特征相似度为权重的边相连。我们通过图卷积在该图上执行推理，其中每个节点的激活由其高度相关的邻域决定。我们的方法在网络训练过程中自然揭示了局部区域间的相互依赖，并在基准视觉美学数据集上取得了最先进的（SOTA）性能。
引用
@article{arxiv.1907.10801,
title = {Composition-Aware Image Aesthetics Assessment},
author = {Dong Liu and Rohit Puri and Nagendra Kamath and Subhabrata Bhattachary},
journal= {arXiv preprint arXiv:1907.10801},
year = {2019}
}