基于关系的时间一致性视频去摩尔纹
计算机视觉与模式识别
2022-04-07 v1
摘要
摩尔纹以色彩失真的形式出现，在使用数码相机拍摄屏幕时严重降低图像和视频质量。考虑到拍摄视频的需求日益增长，我们研究如何去除视频中此类不期望的摩尔纹，即视频去摩尔纹。为此，我们引入了首个手持视频去摩尔纹数据集，并配备专门的数据采集流程以确保所采集数据的空间与时间对齐。此外，我们开发了一个具有隐式特征空间对齐与选择性特征聚合的基线视频去摩尔纹模型，以利用邻近帧的互补信息来改进帧级视频去摩尔纹。更重要的是，我们提出了一种基于关系的时间一致性损失，鼓励模型直接从真实参考视频中学习时间一致性先验，从而促进生成时间一致的预测并有效保持帧级质量。大量实验证明了我们模型的优越性。代码见 \url{https://daipengwa.github.io/VDmoire_ProjectPage/}。
引用
@article{arxiv.2204.02957,
title = {Video Demoireing with Relation-Based Temporal Consistency},
author = {Peng Dai and Xin Yu and Lan Ma and Baoheng Zhang and Jia Li and Wenbo Li and Jiajun Shen and Xiaojuan Qi},
journal= {arXiv preprint arXiv:2204.02957},
year = {2022}
}