学习型帧预测能否与块运动补偿在视频编码中竞争？
图像与视频处理
2020-07-21 v1 计算机视觉与模式识别
机器学习
摘要
鉴于学习型视频预测的最新进展，我们研究一种简单的视频编解码器，其使用预训练深度模型基于先前已编码/解码的帧进行下一帧预测且不发送任何运动边信息，能否与基于块运动补偿的标准视频编解码器竞争。给定学习型帧预测的帧间差异由标准静止图像（帧内）编解码器编码。实验结果表明，具有对称复杂度的该简单编解码器的率失真性能在 10 个 MPEG 测试视频上平均优于 x264 编解码器，但尚未达到 x265 编解码器的水平。这一结果展示了学习型帧预测（LFP）的能力，因为与运动补偿不同，LFP 不使用来自当前图像的信息。分析了使用 L1、L2 或 L2 与对抗损失组合进行训练对预测性能和压缩效率的影响。
引用
@article{arxiv.2007.08922,
title = {Can Learned Frame-Prediction Compete with Block-Motion Compensation for Video Coding?},
author = {Serkan Sulun and A. Murat Tekalp},
journal= {arXiv preprint arXiv:2007.08922},
year = {2020}
}
备注
Accepted for publication in Springer Journal of Signal, Image and Video Processing