LMVP：利用泄漏运动信息的视频预测器
计算机视觉与模式识别
2019-06-25 v1 人工智能
摘要
我们提出一种泄漏运动视频预测器（LMVP），通过捕获给定输入中的空间与时间依赖关系来预测未来帧。运动由一个新提出的组件——运动引导器（motion guider）建模，其同时扮演学习者和教师的角色。具体而言，它从真实数据中学习时间特征，并引导生成器预测未来帧。视频中的空间一致性由一个自适应滤波网络建模。为了进一步确保预测的时空一致性，还采用了一个判别器来区分真实帧与生成帧。此外，判别器向运动引导器和生成器泄漏信息，以辅助运动的学习。所提出的 LMVP 无需人工标注即可有效学习视频中的静态与 temporal 特征。在合成与真实数据上的实验表明，LMVP 可取得最先进的（state-of-the-art）结果。
引用
@article{arxiv.1906.10101,
title = {LMVP: Video Predictor with Leaked Motion Information},
author = {Dong Wang and Yitong Li and Wei Cao and Liqun Chen and Qi Wei and Lawrence Carin},
journal= {arXiv preprint arXiv:1906.10101},
year = {2019}
}