基于众包时间同步评论概念-情感映射的滞后校准视频高光检测与摘要

随着视频分享的普及，对自动视频消化（如高光检测）的需求日益增加。最近，带有众包时间同步视频评论的平台在全球范围内涌现，为高光检测提供了良好机会。然而，该任务并非易事：（1）时间同步评论通常滞后于其对应的镜头；（2）时间同步评论在语义上是稀疏且有噪声的；（3）确定哪些镜头是高光具有高度主观性。本文旨在通过提出一个框架来解决这些挑战，该框架（1）使用概念映射的词汇链进行滞后校准；（2）基于评论强度以及每个镜头的情感与概念浓度组合来建模视频高光；（3）使用结合情感和概念映射的改进 SumBasic 对每个检测到的高光进行摘要。在大型真实世界数据集上的实验表明，我们的高光检测方法和摘要方法均以显著优势优于其他基准方法。