中文

视频时间:性质、编码器与评估

计算机视觉与模式识别 2018-07-19 v1

摘要

视频中帧序列的时间感知编码是视频理解中的一个基本问题。尽管许多人尝试对视频中的时间建模,但关于量化视频时间的显式研究仍然缺失。为填补这一空白,我们旨在显式地评估视频时间。我们描述了视频时间的三个性质,即 a) 时间不对称性,b) 时间连续性和 c) 时间因果性。基于每一种性质,我们构建了一个能够量化相应性质的任务。这使得评估现代视频编码器(如 C3D 和 LSTM)在建模时间方面的有效性成为可能。我们的分析提供了关于现有编码器的见解,同时也引导我们提出一种新的视频时间编码器,它比 C3D 和 LSTM 更适合视频时间识别任务。我们相信所提出的元分析能够为在一组时间感知任务上以平等条件评估视频时间编码器提供合理的基线。

关键词

引用

@article{arxiv.1807.06980,
  title  = {Video Time: Properties, Encoders and Evaluation},
  author = {Amir Ghodrati and Efstratios Gavves and Cees G. M. Snoek},
  journal= {arXiv preprint arXiv:1807.06980},
  year   = {2018}
}

备注

14 pages, BMVC 2018