用于足球场实时球员检测的多模态与多视角蒸馏
计算机视觉与模式识别
2020-04-17 v1 图像与视频处理
摘要
监测公共体育设施的占用情况对于评估其使用状况并推动在新地点建设至关重要。就足球场而言,需覆盖区域较大,因此应使用若干常规摄像机,这使得装置昂贵且复杂。作为替代,我们开发了一个系统,利用一台廉价广角鱼眼摄像机辅以一台窄角热成像摄像机来检测球员。在本工作中,我们以知识蒸馏方法训练网络,其中学生与教师具有不同模态且对同一场景有不同视角。特别地,我们设计了一种自定义数据增强结合运动检测算法,以处理鱼眼摄像机中未被热成像摄像机覆盖区域的训练。我们表明该方案在鱼眼摄像机拍摄的整个球场上检测球员是有效的。我们在在线蒸馏情形下对其进行了定量与定性评估,其中学生实时检测球员并持续适应最新视频条件。
引用
@article{arxiv.2004.07544,
title = {Multimodal and multiview distillation for real-time player detection on a football field},
author = {Anthony Cioppa and Adrien Deliège and Noor Ul Huda and Rikke Gade and Marc Van Droogenbroeck and Thomas B. Moeslund},
journal= {arXiv preprint arXiv:2004.07544},
year = {2020}
}
备注
Accepted for the CVSports workshop of CVPR 2020 ; 8 pages + references