中文

SMURF:基于全图扭曲的自教学多帧无监督 RAFT

计算机视觉与模式识别 2021-05-18 v1

摘要

我们提出 SMURF,一种无监督光流学习方法,其在所有基准上将最先进水平提升了 36%36\%40%40\%(相对于先前最佳方法 UFlow),甚至优于若干有监督方法如 PWC-Net 和 FlowNet2。我们的方法整合了有监督光流中的架构改进,即 RAFT 模型,以及无监督学习的新思路,包括序列感知的自监督损失、处理帧外运动的技术,以及从多帧视频数据有效学习但仍只需两帧进行推断的方法。

关键词

引用

@article{arxiv.2105.07014,
  title  = {SMURF: Self-Teaching Multi-Frame Unsupervised RAFT with Full-Image Warping},
  author = {Austin Stone and Daniel Maurer and Alper Ayvaci and Anelia Angelova and Rico Jonschkowski},
  journal= {arXiv preprint arXiv:2105.07014},
  year   = {2021}
}

备注

Accepted at CVPR 2021, all code available at https://github.com/google-research/google-research/tree/master/smurf