FlowChroma——一种用于视频着色的深度循环神经网络
计算机视觉与模式识别
2023-05-24 v1
摘要
我们开发了一个自动化视频着色框架，以最小化各帧间颜色的闪烁。若将图像着色技术应用于视频的连续帧，它们会将每帧视为独立的着色任务。因此，它们未必能在后续帧中一致地保持场景的颜色。所提出的方案包含一种新颖的深度循环编码器-解码器架构，能够维持视频连续帧间的时间与上下文一致性。我们使用高层语义特征提取器自动识别场景上下文（包括物体），并通过自定义融合层结合帧序列的空间与时间特征。我们展示了实验结果，定性地表明循环神经网络可成功用于改善视频着色中的颜色一致性。
引用
@article{arxiv.2305.13704,
title = {FlowChroma -- A Deep Recurrent Neural Network for Video Colorization},
author = {Thejan Wijesinghe and Chamath Abeysinghe and Chanuka Wijayakoon and Lahiru Jayathilake and Uthayasanker Thayasivam},
journal= {arXiv preprint arXiv:2305.13704},
year = {2023}
}