中文

基于卷积神经网络的骨架动作识别

计算机视觉与模式识别 2017-05-03 v1

摘要

当前基于骨架的动作识别的最先进方法大多基于循环神经网络(RNN)。本文中,我们提出一种新颖的基于卷积神经网络(CNN)的框架,用于动作分类与检测。原始骨架坐标以及骨架运动被直接输入CNN以进行标签预测。设计了一种新颖的骨架变换器模块来自动重排和选择重要骨架关节。通过一个简单的7层网络,我们在NTU RGB+D数据集的验证集上获得了89.3%的准确率。对于未修剪视频中的动作检测,我们开发了窗口提议网络来提取时间片段提议,并在同一网络内进一步分类。在最近的PKU-MMD数据集上,我们实现了93.7%的mAP,大幅超越了基线。

关键词

引用

@article{arxiv.1704.07595,
  title  = {Skeleton-based Action Recognition with Convolutional Neural Networks},
  author = {Chao Li and Qiaoyong Zhong and Di Xie and Shiliang Pu},
  journal= {arXiv preprint arXiv:1704.07595},
  year   = {2017}
}

备注

ICMEW 2017