重访视频复原中的时间对齐
计算机视觉与模式识别
2021-12-02 v2
摘要
长程时间对齐对视频复原任务至关重要却具挑战性。近来，一些工作尝试将长程对齐划分为若干子对齐并逐步处理。尽管该操作有助于建模远距离对应，但由于传播机制，误差累积不可避免。在本工作中，我们提出一种新颖的通用迭代对齐模块，采用渐进细化方案处理子对齐，从而产生更精确的运动补偿。为进一步提升对齐精度与时间一致性，我们开发了一种非参数重加权方法，其中各相邻帧的重要性以空间方式自适应评估用于聚合。借助所提策略，我们的模型在包括视频超分辨率、去噪与去模糊在内的一系列视频复原任务的多个基准上取得了 SOTA 性能。我们的项目见 \url{https://github.com/redrock303/Revisiting-Temporal-Alignment-for-Video-Restoration.git}。
引用
@article{arxiv.2111.15288,
title = {Revisiting Temporal Alignment for Video Restoration},
author = {Kun Zhou and Wenbo Li and Liying Lu and Xiaoguang Han and Jiangbo Lu},
journal= {arXiv preprint arXiv:2111.15288},
year = {2021}
}
备注
15 pages. 17 figures, 10 tables/