基于定制化深度学习的视频分析在监控摄像头上的部署

本文展示了我们基于定制化深度学习的视频分析系统在各种聚焦于安全、安保、顾客分析与流程合规的应用中的有效性。我们描述了由搜索、摘要、统计与实时告警组成的视频分析系统，并概述其构建模块。这些构建模块包括目标检测、跟踪、人脸检测与识别、人体与人脸子属性分析。在每种情况下，我们展示了使用部署场景数据训练的定制模型比现成模型提供显著更优的精度。为此，我们描述了我们的数据处理与模型训练流水线，其能够以快速周转时间从视频中训练并微调模型。最后，由于大多数模型部署在本地，拥有不需要 GPU 的资源受限模型十分重要。我们展示了如何定制训练资源受限模型并将其部署在嵌入式设备上而不损失显著精度。据我们所知，这是第一项针对不同深度学习模型在各种真实世界顾客部署的监控视频分析场景中的综合评估工作。通过分享我们的实现细节以及从为各类顾客部署定制化深度学习模型中所获得的经验，我们希望基于定制化深度学习的视频分析能在全球商业产品中广泛采用。