人体运动视频的一次示范模仿拍摄
计算机视觉与模式识别
2019-12-24 v1 机器人学
摘要
模仿学习已被应用于多个自主摄影系统中以模仿人类摄像师的操作。为模仿不同拍摄风格，现有方法训练多个模型，每个模型处理一种特定风格且需要大量训练样本。因此，现有方法难以泛化至未见过的风格。本文提出一种框架，其仅通过“观看”同一风格的一段示范视频即可模仿该拍摄风格，即一次示范模仿拍摄。这通过两项关键技术实现：1）从示范视频中提取拍摄风格特征；2）将拍摄风格从示范视频迁移至新场景。我们采用深度神经网络实现该方法，并部署至 6 自由度（DOF）真实无人机摄影系统，先预测未来相机运动，再通过里程计将其转换为无人机控制指令。我们在大量数据集与展示样例上的实验结果表明，该方法相较常规基线有显著提升，且能成功模仿具有未见风格的 footage。
引用
@article{arxiv.1912.10609,
title = {One-Shot Imitation Filming of Human Motion Videos},
author = {Chong Huang and Yuanjie Dang and Peng Chen and Xin Yang and Kwang-Ting and Cheng},
journal= {arXiv preprint arXiv:1912.10609},
year = {2019}
}
备注
10 pages, 9 figures