中文

面部动作单元检测中的多标签关系建模

计算机视觉与模式识别 2020-02-11 v2 图像与视频处理

摘要

本文描述了一种面部动作单元检测方法。所涉及的动作单元(AU)包括AU1(额肌内侧部抬眉)、AU2(额肌外侧部抬眉)、AU4(降眉肌)、AU6(提颧肌)、AU12(提口角肌)、AU15(降口角肌)、AU20(口轮匝肌)和AU25(张唇)。我们的工作依赖于FG-2020竞赛:野外情感行为分析(ABAW)发布的数据集。所提出的方法由数据预处理、特征提取和AU分类组成。数据预处理包括人脸纹理与关键点的检测。纹理静态特征与关键点动态特征通过神经网络提取,并融合作为特征隐表示。最后,融合特征被用作带有可训练AU查找表的循环神经网络的初始隐藏状态。RNN的输出即为AU分类结果。检测精度以0.5×准确率 + 0.5×F1评估。我们的方法在组委会指定的验证数据上取得了0.56的成绩。

关键词

引用

@article{arxiv.2002.01105,
  title  = {Multi-label Relation Modeling in Facial Action Units Detection},
  author = {Xianpeng Ji and Yu Ding and Lincheng Li and Yu Chen and Changjie Fan},
  journal= {arXiv preprint arXiv:2002.01105},
  year   = {2020}
}