Comixify:将视频转换为漫画
计算机视觉与模式识别
2018-12-11 v1
摘要
本文提出一种将视频转换为漫画的解决方案。我们使用基于生成对抗网络(GANs)的神经风格算法来处理该任务。神经风格迁移领域的若干近期工作表明,以另一图像风格生成图像是可行的。本文在这些工作基础上,将现有风格迁移用例扩展为一个可用的视频漫画化应用。为此,我们训练了一个端到端的解决方案,分两阶段将输入视频转换为漫画。在第一阶段,我们提出一种最先进的关键帧提取算法,从视频中选取子集帧以提供最全面的视频上下文,并使用图像美学评估引擎对这些帧进行过滤。在第二阶段,将所选关键帧的风格迁移为漫画。为提供最具美学吸引力的结果,我们选用了最先进的风格迁移方案,并基于此实现了我们自己的 ComixGAN 框架。我们工作的最终贡献是一个基于 Web 的可用视频漫画化应用,可在 http://comixify.ii.pw.edu.pl 访问。
引用
@article{arxiv.1812.03473,
title = {Comixify: Transform video into a comics},
author = {Maciej Pęśko and Adam Svystun and Paweł Andruszkiewicz and Przemysław Rokita and Tomasz Trzciński},
journal= {arXiv preprint arXiv:1812.03473},
year = {2018}
}
备注
14 pages. arXiv admin note: substantial text overlap with arXiv:1809.01726