中文

用于图像到视频行人重识别的时序知识传播

计算机视觉与模式识别 2019-10-11 v3

摘要

在行人重识别的许多场景中,图库集由大量监控视频组成,而查询仅是一张图像,因此必须在图像和视频之间进行重识别。与视频相比,静态人物图像缺乏时序信息。此外,图像与视频特征之间的信息不对称增加了图像与视频匹配的难度。为解决这一问题,我们提出了一种新颖的时序知识传播(TKP)方法,将视频表示网络学习到的时序知识传播到图像表示网络中。具体而言,给定输入视频,我们强制图像表示网络在共享特征空间中拟合视频表示网络的输出。通过反向传播,可以转移时序知识以增强图像特征,从而缓解信息不对称问题。结合额外的分类损失和综合三元组损失,我们的模型能够学习到具有表达力和判别力的图像与视频特征,用于图像到视频重识别。大量实验证明了我们方法的有效性,并且在两个广泛使用的数据集上的总体结果以大幅优势超越了 SOTA 方法。代码可在:https://github.com/guxinqian/TKP 获取。

关键词

引用

@article{arxiv.1908.03885,
  title  = {Temporal Knowledge Propagation for Image-to-Video Person Re-identification},
  author = {Xinqian Gu and Bingpeng Ma and Hong Chang and Shiguang Shan and Xilin Chen},
  journal= {arXiv preprint arXiv:1908.03885},
  year   = {2019}
}

备注

Accepted by ICCV 2019