利用伪影放大的帧插值基准主观标注
计算机视觉与模式识别
2020-11-18 v2
摘要
当前光流算法的基准测试要么通过对比预测流场与真值直接评估估计结果，要么间接利用预测流场进行帧插值再对比插值帧与实际帧。在后一种情况下，通常采用均方误差等客观质量度量。然而众所周知，对于图像质量评估，用户实际体验的质量无法完全由此类简单度量推导得出。因此，我们针对某一光流基准（Middlebury 基准）所提供的插值帧开展了一项主观质量评估众包研究。我们收集了插值图像与对应真值之间的强制选择配对比较。为提高观察者在判断配对比较中细微差异时的灵敏度，我们向全参考质量评估领域引入了一种称为伪影放大(artefact amplification)的新方法。根据 Thurstone 模型，我们从众包数据重建了绝对质量标度值。结果我们对 155 个参与算法就插值帧的视觉质量进行了重新排序。该重排序不仅表明了视觉质量评估作为光流与帧插值基准另一评估指标的必要性，其结果也为设计专用于插值图像感知质量的新图像质量评估(IQA)方法提供了真值。作为第一步，我们提出了这样一种新的全参考方法，称为 WAE-IQA。通过加权插值图像与其真值之间的局部差异，WAE-IQA 的表现略优于文献中当前最佳的全参考 IQA 方法。
引用
@article{arxiv.2001.06409,
title = {Subjective Annotation for a Frame Interpolation Benchmark using Artefact Amplification},
author = {Hui Men and Vlad Hosu and Hanhe Lin and Andrés Bruhn and Dietmar Saupe},
journal= {arXiv preprint arXiv:2001.06409},
year = {2020}
}
备注
arXiv admin note: text overlap with arXiv:1901.05362