Follow-Your-Color：多实例草图上色
计算机视觉与模式识别
2025-08-08 v2
摘要
我们提出了Follow-Your-Color，一种基于扩散的多实例草图上色框架。多实例2D线稿上色的生产遵循行业标准的工作流程，包括三个关键阶段：线稿人物设计、单个对象的上色以及精炼过程。艺术家需要逐一上色每个实例，这既不准确又不高效。而当前的生成方法由于多实例配对数据收集的挑战，未能解决这一任务。为解决这些挑战，我们纳入了三个技术设计，以确保精确的人物细节转录并实现单次前向传递的多实例草图上色。具体而言，我们首先提出了自我对弈训练策略以解决训练数据的不足。然后我们引入一个实例导师来输入实例的颜色。为实现准确的颜色匹配，我们提出了基于边缘损失的细粒度颜色匹配，以增强视觉质量。凭借所提出的模块，Follow-Your-Color能够自动将草图转换为具有准确一致性和多实例控制能力的彩色图像。我们在收集的数据集上进行的实验表明，our model在色彩精度方面优于现有方法。具体而言，我们的模型通过零手动调整关键地自动化了上色过程，使得新手用户能够通过提供参考实例和原始线稿来生产具有风格一致性的艺术作品。我们的代码和其他细节均可在https://yinhan-zhang.github.io/color上获取。
引用
@article{arxiv.2503.16948,
title = {Follow-Your-Color: Multi-Instance Sketch Colorization},
author = {Yinhan Zhang and Yue Ma and Bingyuan Wang and Qifeng Chen and Zeyu Wang},
journal= {arXiv preprint arXiv:2503.16948},
year = {2025}
}