基于 Transformer 的带感兴趣区域可控变码率图像压缩
图像与视频处理
2023-08-02 v3 计算机视觉与模式识别
摘要
本文提出一种基于 transformer 的学习型图像压缩系统。它能够以单一模型实现变码率压缩,同时支持感兴趣区域 (ROI) 功能。受提示微调启发,我们引入提示生成网络来调节基于 transformer 的压缩自编码器。我们的提示生成网络根据输入图像、ROI 掩码和码率参数生成内容自适应令牌。ROI 掩码与码率参数的分离提供了一种直观方式,可同时实现变码率和 ROI 编码。大量实验验证了我们所提方法的有效性,并确认其相对于其他竞争方法的优越性。
引用
@article{arxiv.2305.10807,
title = {Transformer-based Variable-rate Image Compression with Region-of-interest Control},
author = {Chia-Hao Kao and Ying-Chieh Weng and Yi-Hsin Chen and Wei-Chen Chiu and Wen-Hsiao Peng},
journal= {arXiv preprint arXiv:2305.10807},
year = {2023}
}
备注
Accepted to IEEE ICIP 2023