自动时间相干视频上色
计算机视觉与模式识别
2019-04-23 v1
摘要
近年来,用于图像复原的灰度图像上色取得了显著改进。许多使用基于学习方法的技术难以有效为上色稀疏输入。随着动漫产业的持续增长,为上色线稿等稀疏输入的能力可通过省去中间帧上色过程,为制作工作室降低大量成本与重复工作。直接使用现有方法会导致相关帧间颜色不一致,在最终视频中产生闪烁效应。为成功实现大规模动漫制作的关键环节自动化,线稿的上色必须在帧间时间一致。本文提出一种在对抗环境下为上色线稿帧的方法,通过改进现有的图像到图像翻译方法,创建大型动漫的时间相干视频。我们展示,通过为生成器与判别器增加额外条件,可有效从动漫线稿生成时间一致的视频序列。代码与模型见:https://github.com/Harry-Thasarathan/TCVC
引用
@article{arxiv.1904.09527,
title = {Automatic Temporally Coherent Video Colorization},
author = {Harrish Thasarathan and Kamyar Nazeri and Mehran Ebrahimi},
journal= {arXiv preprint arXiv:1904.09527},
year = {2019}
}