对比式单调像素级调制
计算机视觉与模式识别
2022-07-26 v1
摘要
连续的一对多映射在低层视觉与神经图像翻译中是一项较少被研究但却十分重要的任务。本文提出一种称为 MonoPix 的新公式,这是一种无监督的对比式连续调制模型,并进一步实现了像素级空间控制,该控制至关重要但此前无法被妥善处理。本工作的关键特征是通过一种新颖的对比调制框架及相应的单调性约束,对控制信号与域判别器之间的单调性进行建模。我们还引入了一种具有对数近似复杂度的选择性推理策略,并支持快速域适应。在包括 AFHQ 猫-狗与 Yosemite 夏-冬翻译在内的多种连续映射任务上验证了最先进的性能。所提出的方法还有助于为低光增强与自然噪声生成等许多低层任务提供新解决方案,这超越了长期确立的一对一训练与推理实践。代码见 https://github.com/lukun199/MonoPix。
引用
@article{arxiv.2207.11517,
title = {Contrastive Monotonic Pixel-Level Modulation},
author = {Kun Lu and Rongpeng Li and Honggang Zhang},
journal= {arXiv preprint arXiv:2207.11517},
year = {2022}
}
备注
ECCV'2022 Oral presentation, including both main paper and supp