利用多模态兴奋特征自动精选高尔夫精彩集锦
计算机视觉与模式识别
2017-07-25 v1 多媒体
摘要
制作总结比赛中最激动人心时刻的体育精彩集锦是广播媒体的一项重要任务。然而，这需要耗费大量人力的视频编辑工作。我们提出了一种自动精选体育精彩集锦的新方法，并将其用于构建一个辅助编辑高尔夫精彩集锦的实际系统。我们的方法融合了来自球员反应（如击掌和挥拳等动作识别）、观众（人群欢呼）和评论员（语调和词汇分析）的信息，以确定比赛中最有趣的时刻。我们准确识别关键击球精彩片段的起始和结束帧，并附带球员姓名和球洞编号等元数据，从而实现个性化的内容摘要与检索。此外，我们引入了利用不同模态之间的相关性来减少手动训练数据标注、从而学习分类器的新技术。我们的工作已在一场大型高尔夫锦标赛中得到演示，成功从连续四天的实时视频流中提取了精彩集锦。
引用
@article{arxiv.1707.07075,
title = {Automatic Curation of Golf Highlights using Multimodal Excitement Features},
author = {Michele Merler and Dhiraj Joshi and Quoc-Bao Nguyen and Stephen Hammer and John Kent and John R. Smith and Rogerio S. Feris},
journal= {arXiv preprint arXiv:1707.07075},
year = {2017}
}