基于扩散模型的草图驱动两阶段时装图像生成——TexControl

深度学习驱动的草图转服装图像生成为时装设计过程提供初始设计与灵感。然而，由于草图信息稀疏且模糊，基于草图的服装生成具有挑战性。当前生成模型可能难以生成详细的纹理信息。本文提出 TexControl—a一种基于草图的时装生成框架，采用两阶段管道生成与输入草图对应的时装图像。首先，我们采用 ControlNet 从草图生成时装图像并保持图像轮廓稳定。随后，我们使用图像到图像方法优化生成图像的细节纹理，获取最终结果。评估结果表明，TexControl 能够生成纹理细节高质量的时装图像。