KVQ：通过显著性引导的局部感知提升视频质量评估
计算机视觉与模式识别
2025-03-14 v1
摘要
视频质量评估（VQA），旨在预测视频的感知质量，已引起越来越多的关注。由于运动模糊或特定失真等因素，视频中不同区域的质量各不相同。识别视频中的区域级局部质量有助于评估全局质量，并可指导我们采用细粒度的增强或转码策略。由于区域级质量标注成本高昂，缺乏相关数据集中的真实约束进一步加剧了局部感知的利用难度。借鉴人类视觉系统（HVS）将全局质量与不同区域的局部纹理及其视觉显著性相联系的机制，我们提出了万花筒视频质量评估（KVQ）框架，旨在有效评估显著性和局部纹理，从而促进全局质量的评估。我们的框架通过融合窗口注意力（FWA）提取视觉显著性并分配注意力，同时引入局部感知约束（LPC）以减轻区域纹理感知对邻近区域的依赖。与 SOTA 方法相比，KVQ 在五个 VQA 基准上的多种场景下取得了显著提升。此外，为评估局部感知，我们建立了一个新的局部感知视觉质量（LPVQ）数据集，包含区域级标注。实验结果证明了 KVQ 感知局部失真的能力。KVQ 模型和 LPVQ 数据集将在 https://github.com/qyp2000/KVQ 获取。
引用
@article{arxiv.2503.10259,
title = {KVQ: Boosting Video Quality Assessment via Saliency-guided Local Perception},
author = {Yunpeng Qu and Kun Yuan and Qizhi Xie and Ming Sun and Chao Zhou and Jian Wang},
journal= {arXiv preprint arXiv:2503.10259},
year = {2025}
}
备注
11 pages, 7 figures