基于Retinex引导的通道分组块交换的任意风格迁移
计算机视觉与模式识别
2023-09-20 v1
摘要
基于块匹配的风格迁移基本原理是用风格图像特征图中最近邻块替换内容图像特征图的块。由于从单一美学风格图像提取的有限特征不足以表征内容自然图像的丰富纹理，现有技术将全通道风格特征块视为简单信号张量，并通过信号级融合构造新风格特征块，其忽略了风格特征中隐含的多样性，因而无法生成更佳的风格化结果。本文中，我们提出一种Retinex理论引导、基于通道分组的块交换技术以解决上述挑战。通道分组策略将风格特征图分为表面与纹理通道，避免了赢者通吃问题。基于Retinex理论的分解控制了更稳定的通道码率生成。此外，我们给出互补融合与多尺度生成策略，分别用于防止意外黑色区域与过度风格化结果。实验结果表明，所提方法在提供更风格一致纹理的同时保持内容保真度，优于现有技术。
引用
@article{arxiv.2309.10528,
title = {Retinex-guided Channel-grouping based Patch Swap for Arbitrary Style Transfer},
author = {Chang Liu and Yi Niu and Mingming Ma and Fu Li and Guangming Shi},
journal= {arXiv preprint arXiv:2309.10528},
year = {2023}
}