超越MOS：基于感知相似性的主观图像质量评分预处理方法
计算机视觉与模式识别
2024-05-01 v1 图像与视频处理
摘要
图像质量评估通常依赖于主观实验中由受试者提供的原始意见分数，这些分数可能噪声较大且不可靠。为解决此问题，已制定标准后处理程序，如 ITU-R BT.500、ITU-T P.910 和 ITU-T P.913，以清理原始意见分数。这些方法使用注释者基于统计的先验，但未考虑对图像本身的广泛信息，在注释较少的场景中性能有限。一般而言，图像质量数据集通常包含相似的场景或失真，受试者在评分时不可避免地需要与其他图像进行比较以给出合理的分数。因此，本文提出了基于感知相似性的主观图像质量评分预处理方法——感知相似性主观预处理（PSP），其利用先前评分图像之间的感知相似性来缓解注释较少场景中的主观偏差。具体而言，我们将主观评分建模为基于感知相似性的条件概率模型，称为潜意识参考评分。参考图像通过归一化向量点积基于最近邻搜索获取的图像感知深度特征存储在邻近字典中。然后，通过潜意识参考评分的指数移动平均（EMA）更新预处理分数，称为相似性正则化EMA。我们在多个数据集（LIVE、TID2013、CID2013）上的实验表明，该方法能够有效消除主观分数的偏差。此外，实验表明，预处理后的数据集能够显著提高下游IQA任务的性能。
引用
@article{arxiv.2404.19666,
title = {Beyond MOS: Subjective Image Quality Score Preprocessing Method Based on Perceptual Similarity},
author = {Lei Wang and Desen Yuan},
journal= {arXiv preprint arXiv:2404.19666},
year = {2024}
}