一种用于提升移动设备显示用户体验的自动图像内容检索方法

越来越多市售手机配备集成的高分辨率数码相机。这使得一类专用的图像分析应用成为可能，例如移动视觉搜索、图像裁剪、目标检测、基于内容的图像检索、图像分类。本文提出一种用于移动设备显示的图像内容检索与分类的新移动应用，以丰富用户的视觉体验。该移动应用可基于图像内容，利用视觉显著性方法提取若干图像，旨在从感知角度检测给定图像中最关键的区域。首先，利用二维显著性函数的局部极大值提取感知视角下的最关键区域。接着，使用以图像阈值化显著性图局部极大值为中心的边界框裁剪显著区域。然后，每个图像裁剪块被输入基于 SVM 和 SIFT 描述子的图像分类系统，以检测图像中存在的目标类别。ImageNet 仓库被用作语义类别分类的参考。Android 平台被用于以客户端-服务器架构实现该移动应用。移动客户端将相机拍摄的照片发送至服务器，服务器处理图像并将结果（图像内容如图像裁剪块及相关目标类别）返回移动客户端。该应用已在数千张图片上运行，并显示出对改善移动显示用户视觉体验的令人鼓舞的结果。