中文

基于注意力的特征压缩用于边缘计算中的CNN推理卸载

计算机视觉与模式识别 2023-02-13 v2

摘要

本文研究设备-边缘协同推理系统中CNN推理的计算卸载。受新兴范式语义通信启发,我们提出一种基于自编码器的新型CNN架构(AECNN),用于在终端设备上进行有效特征提取。我们基于CNN中的通道注意力方法设计特征压缩模块,通过选择最重要特征来压缩中间数据。为进一步降低通信开销,可使用熵编码消除压缩数据中的统计冗余。在接收端,我们设计轻量解码器,通过从接收到的压缩数据学习来重构中间数据以提升精度。为加速收敛,我们采用逐步方法训练基于ResNet-50架构获得的神经网络。实验结果表明,AECNN可将中间数据压缩超过256倍且仅约4%精度损失,优于最先进工作BottleNet++。相较于将推理任务直接卸载至边缘服务器,AECNN可更早完成推理任务,尤其在恶劣无线信道条件下,这凸显了AECNN在时延约束内保障更高精度的有效性。

关键词

引用

@article{arxiv.2211.13745,
  title  = {Attention-based Feature Compression for CNN Inference Offloading in Edge Computing},
  author = {Nan Li and Alexandros Iosifidis and Qi Zhang},
  journal= {arXiv preprint arXiv:2211.13745},
  year   = {2023}
}

备注

Accepted by IEEE ICC 2023