聚焦查询的抽取式视频摘要
计算机视觉与模式识别
2016-07-19 v1
摘要
视频数据正在爆炸式增长。作为“大数据视频”的结果,用于自动视频摘要的智能算法已重新成为迫切需求。我们开发了一个概率模型,序列与层次行列式点过程(SH-DPP),用于聚焦查询的抽取式视频摘要。给定用户查询和长视频序列,我们的算法通过从视频中选择关键镜头返回摘要。将某镜头纳入摘要的决定取决于该镜头与用户查询的相关性及其在视频上下文中的重要性,两者联合考虑。我们在两个密集标注的视频数据集上验证了我们的方法。聚焦查询的视频摘要对搜索引擎特别有用,例如用于显示视频片段。
引用
@article{arxiv.1607.05177,
title = {Query-Focused Extractive Video Summarization},
author = {Aidean Sharghi and Boqing Gong and Mubarak Shah},
journal= {arXiv preprint arXiv:1607.05177},
year = {2016}
}
备注
Accepted to ECCV 2016