具有运动细化与帧级码率分配的可变码率学习型分层双向视频压缩

本文对我们近期关于端到端优化的分层双向视频压缩的工作进行了改进并引入新模块，以进一步推进学习型视频压缩的最先进水平。作为改进，我们合并运动估计与预测模块，并压缩细化后的残差运动矢量，从而提升率失真性能。作为新模块，我们以两种方式将针对图像压缩提出的增益单元适配到可变码率视频压缩中：第一，增益单元使单一编码器模型可在多个率失真工作点上运行；第二，我们利用增益单元通过微调相应模型来控制帧内编码与双向编码帧之间的码率分配，从而实现真正可变码率的学习型视频编码。实验结果表明，我们获得了超越所有已有学习型视频编码方法的率失真性能。