AnimeColor：基于扩散变换器的参考动画上色
计算机视觉与模式识别
2025-07-29 v1
摘要
动画上色在动画制作中起关键作用，但现有方法在实现颜色准确性和时间一致性方面存在挑战。为此，我们提出了 **AnimeColor**，一个新型参考驱动的动画上色框架，利用扩散变换器 (DiT)。我们的方法将草图序列整合到 DiT 基于视频的扩散模型中，实现草图控制动画生成。我们引入两个关键组件：高层颜色提取器 (HCE) 用于捕获语义颜色信息，低层颜色引导器 (LCG) 用于从参考图像中提取细粒度颜色细节。这些组件协同工作，引导视频扩散过程。此外，我们采用多阶段训练策略以最大化利用参考图像颜色信息。广泛的实验表明，AnimeColor 在颜色准确性、草图对齐、时间一致性和视觉质量方面均优于现有方法。我们的框架不仅推动了动画上色领域的技术进步，还为工业应用提供了实用解决方案。代码将在 https://github.com/IamCreateAI/AnimeColor 上公开。
引用
@article{arxiv.2507.20158,
title = {AnimeColor: Reference-based Animation Colorization with Diffusion Transformers},
author = {Yuhong Zhang and Liyao Wang and Han Wang and Danni Wu and Zuzeng Lin and Feng Wang and Li Song},
journal= {arXiv preprint arXiv:2507.20158},
year = {2025}
}