CCLAP：基于隐扩散模型的可控中国画山水生成方法
计算机视觉与模式识别
2023-06-05 v2
摘要
随着深度生成模型的发展，近年来中国画山水生成取得了巨大成功。然而，由于数据缺乏与建模能力有限，少有工作关注可控的中国画山水生成。在本工作中，我们提出一种名为CCLAP的可控中国画山水生成方法，该方法可基于隐扩散模型（Latent Diffusion Model）生成具有特定内容与风格的图像。具体而言，其由两个级联模块组成，即内容生成器与风格聚合器。内容生成器模块保证生成画作的内容特定于输入文本。而风格聚合器模块用于生成与参考图像对应风格的画作。此外，我们收集了一个名为CLAP的中国画山水新数据集用于综合评估。定性与定量结果均表明，我们的方法取得了最先进的性能，尤其在构图艺术性与意境方面。代码见 https://github.com/Robin-WZQ/CCLAP。
引用
@article{arxiv.2304.04156,
title = {CCLAP: Controllable Chinese Landscape Painting Generation via Latent Diffusion Model},
author = {Zhongqi Wang and Jie Zhang and Zhilong Ji and Jinfeng Bai and Shiguang Shan},
journal= {arXiv preprint arXiv:2304.04156},
year = {2023}
}
备注
8 pages,13 figures