从单张运动模糊图像中基于仿射模型提取视频
计算机视觉与模式识别
2021-04-09 v1
摘要
运动模糊图像是曝光时间内多帧清晰帧的时间平均。从单张模糊图像中恢复这些清晰视频帧并非易事，不仅因为其强烈的病态性，还因为现实中各类复杂运动（如旋转和深度方向运动）。在本工作中，我们报道一种使用仿射运动建模的通用视频提取方法，能够处理多种复杂运动及其混合。在其流程中，运动物体首先在alpha通道中分割，从而允许对不同运动的不同物体分别恢复。然后，我们通过将每个视频片段建模为参考帧的一系列仿射变换来缩减变量空间，并引入范数全变分正则化以衰减振铃伪影。采用可微仿射算子实现仿射模型的梯度下降优化，其遵循一种新颖的由粗到细策略以进一步减少伪影。结果，仿射参数和清晰参考图像均被恢复。它们最终被输入逐步仿射变换以恢复清晰视频帧。逐步恢复保持了绕过帧顺序模糊性的本质。在公开数据集和真实拍摄数据上的实验验证了所报道技术的最先进性能。
引用
@article{arxiv.2104.03777,
title = {Affine-modeled video extraction from a single motion blurred image},
author = {Daoyu Li and Liheng Bian and Jun Zhang},
journal= {arXiv preprint arXiv:2104.03777},
year = {2021}
}