基于像素语义的深度联合信源信道编码
图像与视频处理
2022-08-25 v1
摘要
面向智能任务的图像语义信息隐藏在像素背后，像素的微小变化会影响智能任务的性能。为了在无线图像传输过程中为智能任务保留像素背后的语义信息，我们提出了一种基于像素语义的联合信源信道编码方法，该方法可通过保留语义信息来提升接收端图像智能任务的性能。具体而言，我们首先利用智能任务感知结果相对于像素的梯度来表示像素的语义重要性。然后，我们提取语义失真，并以最小化语义失真而非像素失真为目标训练深度联合信源信道编码网络。实验结果表明，在相同传输速率和信噪比下，与SOTA深度联合信源信道编码方法和传统分离式信源信道编码方法相比，所提方法将智能分类任务的性能分别提升了1.38%和66%。
引用
@article{arxiv.2208.11375,
title = {Deep Joint Source-Channel Coding Based on Semantics of Pixels},
author = {Qizheng Sun and Caili Guo and Yang Yang and Jiujiu Chen and Rui Tang and Chuanhong Liu},
journal= {arXiv preprint arXiv:2208.11375},
year = {2022}
}