通过调色板引导的一致视频上色
计算机视觉与模式识别
2025-02-03 v1
摘要
上色是计算机视觉中的经典任务，在许多耗时的任务中发挥重要作用，如旧电影修复。现有方法存在颜色不饱和和时序不一致的问题。本文提出了一种新颖的管道以克服这些挑战。我们将上色任务视为生成任务，引入Stable Video Diffusion (SVD)作为基础模型。我们设计了基于调色板的颜色引导器，以帮助模型生成鲜艳且一致的颜色。通过调色板引入的颜色上下文不仅为颜色生成提供指导，还通过跨多个序列的统一颜色上下文来增强生成颜色的稳定性。实验表明，所提方法能够为视频提供鲜艳且稳定的颜色，超越了以往方法。
引用
@article{arxiv.2501.19331,
title = {Consistent Video Colorization via Palette Guidance},
author = {Han Wang and Yuang Zhang and Yuhong Zhang and Lingxiao Lu and Li Song},
journal= {arXiv preprint arXiv:2501.19331},
year = {2025}
}