洞察更多细节:基于专家挖掘的高效图像超分辨率
图像与视频处理
2024-06-07 v2 计算机视觉与模式识别
摘要
从低分辨率输入重建高分辨率图像是图像超分辨率领域的一个重大挑战。虽然近期的方法展示了针对不同目标定制的复杂操作的有效性,但简单堆叠这些不同的操作可能导致巨大的计算负担,阻碍其实际应用。为此,我们提出了 SeemoRe,一种采用专家挖掘的高效超分辨率模型。我们的方法在不同层级策略性地引入专家,采用协作方法论。在宏观尺度上,我们的专家处理秩维度和空间维度的信息特征,提供整体理解。随后,模型通过利用混合低秩专家,深入探究秩选择的微妙之处。通过利用专注于对精确超分辨率至关重要的不同关键因素的专家,我们的模型擅长揭示复杂的特征内细节。这种协作方法类似于“洞察更多”的概念,使我们的模型能够在高效设置下以最小的计算成本实现最佳性能。源代码将公开在 https://github.com/eduardzamfir/seemoredetails。
引用
@article{arxiv.2402.03412,
title = {See More Details: Efficient Image Super-Resolution by Experts Mining},
author = {Eduard Zamfir and Zongwei Wu and Nancy Mehta and Yulun Zhang and Radu Timofte},
journal= {arXiv preprint arXiv:2402.03412},
year = {2024}
}
备注
Accepted at ICML 2024