移动 NPU 上的实时量化图像超分辨率:Mobile AI 2021 挑战赛报告
图像与视频处理
2021-05-18 v1 计算机视觉与模式识别
机器学习
摘要
图像超分辨率是最受欢迎的计算机视觉问题之一,对移动设备有许多重要应用。尽管已提出诸多解决方案,它们通常甚至未针对常见智能手机 AI 硬件优化,更毋论常仅支持 INT8 推理的更受限智能电视平台。为解决此问题,我们引入首届 Mobile AI 挑战赛,目标是开发基于端到端深度学习的图像超分辨率方案,能在移动或边缘 NPU 上展现实时性能。为此,向参与者提供 DIV2K 数据集并训练量化模型以高效完成 3 倍图像放大。所有模型运行时间在 Synaptics VS680 智能家居板上评估,该板配备可加速量化神经网络的专用 NPU。所提方案完全兼容所有主流移动 AI 加速器,能在 40–60 ms 内重建全高清图像且获得高保真结果。本文详细描述了挑战赛中开发的所有模型。
引用
@article{arxiv.2105.07825,
title = {Real-Time Quantized Image Super-Resolution on Mobile NPUs, Mobile AI 2021 Challenge: Report},
author = {Andrey Ignatov and Radu Timofte and Maurizio Denna and Abdel Younes and Andrew Lek and Mustafa Ayazoglu and Jie Liu and Zongcai Du and Jiaming Guo and Xueyi Zhou and Hao Jia and Youliang Yan and Zexin Zhang and Yixin Chen and Yunbo Peng and Yue Lin and Xindong Zhang and Hui Zeng and Kun Zeng and Peirong Li and Zhihuang Liu and Shiqi Xue and Shengpeng Wang},
journal= {arXiv preprint arXiv:2105.07825},
year = {2021}
}
备注
Mobile AI 2021 Workshop and Challenges: https://ai-benchmark.com/workshops/mai/2021/