中文

面向深度视频压缩的任务感知编码器控制

图像与视频处理 2024-04-23 v2 人工智能 计算机视觉与模式识别

摘要

先前针对机器任务的深度视频压缩(DVC)研究通常需要为每个特定任务训练一个独特的编解码器,要求每个任务有一个专用的解码器。相比之下,传统视频编解码器采用灵活的编码器控制器,通过模式预测等机制使单个编解码器适应不同任务。受此启发,我们为面向机器的深度视频压缩引入了一种创新的编码器控制器。该控制器具有模式预测和图像组(GoP)选择模块。我们的方法将控制集中在编码阶段,允许针对不同任务(如检测和跟踪)进行可适应的编码器调整,同时保持与标准预训练DVC解码器的兼容性。实验证据表明,我们的方法可适用于多种任务,并与各种现有的预训练DVC兼容。此外,大量实验表明,我们的方法在仅使用一个预训练解码器的情况下,针对不同任务比之前的DVC节省约25%的比特率。

关键词

引用

@article{arxiv.2404.04848,
  title  = {Task-Aware Encoder Control for Deep Video Compression},
  author = {Xingtong Ge and Jixiang Luo and Xinjie Zhang and Tongda Xu and Guo Lu and Dailan He and Jing Geng and Yan Wang and Jun Zhang and Hongwei Qin},
  journal= {arXiv preprint arXiv:2404.04848},
  year   = {2024}
}

备注

Accepted by CVPR 2024