时空感知的多分辨率视频增强
计算机视觉与模式识别
2020-03-31 v1
摘要
我们考虑时空超分辨率（ST-SR）问题：提高视频帧的空间分辨率并同时插帧以提高帧率。现代方法逐一处理这些维度。相反，我们提出的称为 STARnet 的模型在时空上联合超分辨率。这使我们能够利用时间与空间之间互为信息的关系：更高分辨率可提供关于运动的更细致信息，而更高帧率可提供更好的像素对齐。我们在 ST-SR 期间生成潜在低分辨率与高分辨率表示的模型组件，可用于微调一种仅空间或仅时间超分辨率的专用机制。实验结果表明，STARnet 在公开可用数据集上大幅提升了时空、空间与时间视频超分辨率的性能。
引用
@article{arxiv.2003.13170,
title = {Space-Time-Aware Multi-Resolution Video Enhancement},
author = {Muhammad Haris and Greg Shakhnarovich and Norimichi Ukita},
journal= {arXiv preprint arXiv:2003.13170},
year = {2020}
}
备注
To appear in CVPR2020