一种面向数字人头部的无参考质量评估方法
计算机视觉与模式识别
2023-10-26 v1 图像与视频处理
摘要
近年来，数字人在增强/虚拟现实（A/VR）中得到广泛应用，观众可自由观察和交互体积内容。然而，数字人在生成与传输过程中可能因各种失真而退化。此外，针对数字人感知质量评估的研究甚少。因此，亟需开展客观质量评估方法以应对数字人质量评估（DHQA）的挑战。本文中，我们提出了一种基于Transformer的的新型无参考（NR）方法，以多任务方式处理DHQA。具体而言，将数字人的正面2D投影渲染为输入，并采用视觉Transformer（ViT）进行特征提取。随后我们设计了一个多任务模块，联合分类失真类型并预测数字人的感知质量等级。实验结果表明，所提方法与主观评分具有良好相关性，并优于当前最优的质量评估方法。
引用
@article{arxiv.2310.16732,
title = {A No-Reference Quality Assessment Method for Digital Human Head},
author = {Yingjie Zhou and Zicheng Zhang and Wei Sun and Xiongkuo Min and Xianghe Ma and Guangtao Zhai},
journal= {arXiv preprint arXiv:2310.16732},
year = {2023}
}