中文

一种基于 RGB 与热成像视频的实时人体动作识别算法

计算机视觉与模式识别 2023-04-05 v1

摘要

在视频中实时监测人体的运动与动作是一项重要任务。我们提出了一种基于深度学习的、适用于 RGB 与热成像相机的人体动作识别算法。它能够在配备 NVIDIA GPU 的笔记本上实时检测与跟踪人体并识别四种基本动作(站立、行走、奔跑、躺卧)。为此,它结合了用于目标检测(Scaled YoloV4)、光流(RAFT)和姿态估计(EvoSkeleton)的当前最优组件。在一组隧道视频上的定性实验表明,所提算法对 RGB 与热成像视频均鲁棒工作。

关键词

引用

@article{arxiv.2304.01567,
  title  = {A real-time algorithm for human action recognition in RGB and thermal video},
  author = {Hannes Fassold and Karlheinz Gutjahr and Anna Weber and Roland Perko},
  journal= {arXiv preprint arXiv:2304.01567},
  year   = {2023}
}

备注

Accepted for SPIE Real-Time Image Processing and Deep Learning Conference 2023