用于真实感压缩视频感知的关键帧辅助混合编码
图像与视频处理
2022-10-19 v1
摘要
快照压缩成像(SCI)将高速场景视频编码为单次测量,随后通过计算重建,从而实现高效的高维数据采集。从基于正则化的优化到深度学习,大量算法被研究以提升重建质量,但仍受限于标准SCI范式的不适定与信息匮乏本质。为克服这些缺陷,我们提出一种用于压缩视频感知的关键帧辅助混合编码新范式,称为KH-CVS,其交替捕获无编码的短曝光关键帧与长曝光编码压缩帧以联合重建真实感视频。利用光流与空间扭曲,构建深度卷积神经网络框架以融合这两类帧的优势。在仿真及我们所研制原型的真实数据上的大量实验验证了所提方法的优越性。
引用
@article{arxiv.2207.12627,
title = {Key frames assisted hybrid encoding for photorealistic compressive video sensing},
author = {Honghao Huang and Jiajie Teng and Yu Liang and Chengyang Hu and Minghua Chen and Sigang Yang and Hongwei Chen},
journal= {arXiv preprint arXiv:2207.12627},
year = {2022}
}