面向视频帧插值的主观质量研究
图像与视频处理
2024-11-22 v2 计算机视觉与模式识别
摘要
视频帧插值（VFI）是视频处理中的基础研究领域之一，关于新颖且增强的插值算法已有广泛研究。然而，对于插值内容的质量评估却并非如此。本文基于新开发的视频数据库 BVI-VFI 描述了一项针对 VFI 的主观质量研究。BVI-VFI 包含 36 个以三种不同帧率采集的参考序列，以及使用五种传统和基于学习的 VFI 算法生成的 180 个失真视频。我们从 60 名人类参与者处收集了主观意见分数，并用于评估八种流行的质量指标，包括 PSNR、SSIM 和 LPIPS，这些均常用于评估 VFI 方法。结果表明，这些指标中没有一个能与插值内容的感知质量提供可接受的相关性，表现最佳的指标 LPIPS 的 SROCC 值低于 0.6。我们的发现表明，迫切需要一个专为 VFI 设计的感知质量指标。BVI-VFI 数据集已公开，可在 https://danier97.github.io/BVI-VFI/ 获取。
引用
@article{arxiv.2202.07727,
title = {A Subjective Quality Study for Video Frame Interpolation},
author = {Duolikun Danier and Fan Zhang and David Bull},
journal= {arXiv preprint arXiv:2202.07727},
year = {2024}
}