宽松强迫选择提升视觉质量评估方法的性能

在图像质量评估中，图像或视频的集体视觉质量分数由多名受试者的个体评分获得。这些实验中一种常用的格式是二选一强迫选择法。依次或并排呈现内容相同但视觉质量不同的两个刺激。要求受试者选择质量较好者，不确定时须猜测。宽松二选一强迫选择格式旨在通过将第三个响应选项即“不确定”引入，降低认知负荷以及由猜测带来的响应噪声。本文提出一项大型且全面的众包实验，以比较这两种响应格式：带“不确定”选项与不带该选项。为提供无歧义的质量评估真值，向受试者展示点数不同的图像对，并要求其每次选择点数更多者。我们的众包研究涉及 254 名参与者，采用被试内设计进行。每位参与者需对带与不带“不确定”响应选项的 40 对比较作出响应，并完成问卷以评估各测试条件下的认知负荷。实验结果表明，在强迫选择法中加入“不确定”响应选项降低了心理负荷，并得到了数据拟合更好、与真值更吻合的模型。我们还检验了模型的等价性，发现它们存在差异。数据集可从 http://database.mmsp-kn.de/cogvqa-database.html 获取。