TransTIC：将基于 Transformer 的图像压缩从人类感知迁移至机器感知
图像与视频处理
2023-08-21 v2
摘要
本工作旨在不微调编解码器的前提下，将基于 Transformer 的图像压缩编解码器从人类感知迁移到机器感知。我们提出一种可迁移的基于 Transformer 的图像压缩框架，称为 TransTIC。受视觉提示微调（visual prompt tuning）启发，TransTIC 采用实例特定提示生成器向编码器注入实例特定提示，并向解码器注入任务特定提示。大量实验表明，我们所提方法能够将基础编解码器迁移至多种机器任务，并显著优于对比方法。据我们所知，本工作是首次尝试在底层图像压缩任务上利用提示（prompting）。
关键词
引用
@article{arxiv.2306.05085,
title = {TransTIC: Transferring Transformer-based Image Compression from Human Perception to Machine Perception},
author = {Yi-Hsin Chen and Ying-Chieh Weng and Chia-Hao Kao and Cheng Chien and Wei-Chen Chiu and Wen-Hsiao Peng},
journal= {arXiv preprint arXiv:2306.05085},
year = {2023}
}
备注
Accepted to ICCV 2023