天空之城：视频中的动态天空替换与协调
计算机视觉与模式识别
2020-10-23 v1
摘要
本文提出一种基于视觉的视频天空替换与协调方法，可自动生成具有可控风格的逼真而富有戏剧性的视频天空背景。与以往要么聚焦于静态照片、要么需要在拍摄视频时依赖智能手机中惯性测量单元的天空编辑方法不同，我们的方法纯基于视觉，对采集设备无任何要求，并可很好地应用于在线或离线处理场景。我们的方法实时运行且无需用户交互。我们将这一艺术创作过程分解为若干代理任务，包括天空抠图、运动估计和图像混合。实验在野外使用手持智能手机和行车记录仪多样采集的视频上进行，表明我们的方法在视觉质量和光照/运动动态上均具有高保真度和良好的泛化性。我们的代码和动画结果可在\url{https://jiupinjia.github.io/skyar/}获取。
引用
@article{arxiv.2010.11800,
title = {Castle in the Sky: Dynamic Sky Replacement and Harmonization in Videos},
author = {Zhengxia Zou},
journal= {arXiv preprint arXiv:2010.11800},
year = {2020}
}
备注
project website: https://jiupinjia.github.io/skyar/