全景视频的视觉质量评估
图像与视频处理
2019-07-16 v4
摘要
与传统视频相比，全景视频支持球面观看方向并支持头戴式显示器，提供了交互式和沉浸式体验。遗憾的是，据我们所知，目前针对全景视频编码的视觉质量评估 (VQA) 方法（无论是主观还是客观）都很少。本文提出了评估全景视频编码中质量损失的主观和客观方法。具体而言，我们首先提出了一个新的数据库，其中包含多名受试者观看全景视频序列时的观看方向数据。然后，从我们的数据库中，我们发现了不同受试者之间观看方向的高度一致性。观看方向通常分布在前方区域的中心，但有时也会落入与视频内容相关的其他区域。鉴于这一发现，我们提出了一种主观 VQA 方法，用于测量整体和区域全景视频的差异平均意见分 (DMOS)，分别表示为整体 DMOS (O-DMOS) 和向量化 DMOS (V-DMOS)。此外，根据全景视频的人类感知特性，我们提出了两种针对编码全景视频的客观 VQA 方法。一种方法根据像素到前方区域中心的距离对像素的失真进行加权，这考虑了人类在全景图中的偏好。另一种方法根据视频内容预测观看方向，然后利用预测的观看方向在我们的客观 VQA 方法中为每个像素的失真分配权重。最后，我们的实验结果验证了本文提出的主观和客观方法均推进了全景视频最先进的 VQA。
引用
@article{arxiv.1709.06342,
title = {Assessing Visual Quality of Omnidirectional Videos},
author = {Mai Xu and Chen Li and Zulin Wang and Zhenzhong Chen and Zhenyu Guan},
journal= {arXiv preprint arXiv:1709.06342},
year = {2019}
}
备注
[PLEASE CITE the TCSVT version instead of arxiv version!] Published in: IEEE Transactions on Circuits and Systems for Video Technology ( Early Access )