基于联合辨识-验证的时间动作检测
计算机视觉与模式识别
2018-10-22 v1
摘要
时间动作检测旨在不仅识别未修剪视频中每个动作实例的类别，还检测其起始与结束时间。该任务的关键挑战在于准确分类动作并确定每个动作实例的时间边界。在时间动作检测基准 THUMOS 2014 中，同类动作间存在较大差异，而不同动作类别间存在诸多相似性，这始终限制了时间动作检测的性能。为解决此问题，我们提出使用联合辨识-验证（Identification-Verification）网络来减小类内差异并扩大类间区别。该联合辨识-验证网络是一种基于 3D ConvNets 的连体网络，可同时预测动作类别及输入视频提议段对的相似度分数。在具挑战性的 THUMOS 2014 数据集上的大量实验结果证明了我们所提方法相较于现有未修剪视频时间动作检测 SOTA 方法的有效性。
引用
@article{arxiv.1810.08375,
title = {Temporal Action Detection by Joint Identification-Verification},
author = {Wen Wang and Yongjian Wu and Haijun Liu and Shiguang Wang and Jian Cheng},
journal= {arXiv preprint arXiv:1810.08375},
year = {2018}
}