众包中主观视频质量评估测试方法的比较研究：面向不同用例
多媒体
2025-09-25 v1
摘要
在众包主观视频质量评估中，从业者经常面临绝对类别评级（ACR）、带隐藏参考的ACR（ACR-HR）和比较类别评级（CCR）之间的选择。我们按照P.910标准，在六项研究中进行了并排比较，使用了15个质量良好和一般的说话人头部视频源，并进行了真实的退化处理（模糊、缩放、压缩、冻结及其组合），以及一个在720p和1080p分辨率下的实际码率阶梯任务。我们评估了统计效率（标准差）、经济效率和决策一致性。结果表明，ACR-HR和ACR在条件级别上高度相关，而CCR更敏感——能够捕捉到超出参考的改进。然而，ACR-HR表现出压缩的尺度使用，特别是对于源质量一般的视频。ACR-HR的速度和成本效益约为ACR的两倍，归一化变异性更低，但质量测量方法的选择会改变饱和点和码率阶梯建议。最后，我们提供了关于何时使用每种测试方法的实用指导。
引用
@article{arxiv.2509.20118,
title = {Comparative Study of Subjective Video Quality Assessment Test Methods in Crowdsourcing for Varied Use Cases},
author = {Babak Naderi and Ross Cutler},
journal= {arXiv preprint arXiv:2509.20118},
year = {2025}
}