基于联合自适应注意力与图关系的动作单元检测
计算机视觉与模式识别
2021-07-12 v1
摘要
本文描述了一种面部动作单元(AU)检测方法。在这项工作中,我们展示了提交给2021年场域情感行为分析(ABAW)竞赛的方案。所提出的方法使用预训练的JAA模型作为特征提取器,并在多尺度特征的基础上提取全局特征、人脸对齐特征和AU局部特征。我们将AU局部特征作为图卷积的输入,以进一步考虑AU之间的相关性,最后使用融合特征对AU进行分类。检测准确率通过0.5*准确率 + 0.5*F1进行评估。我们的模型在具有挑战性的Aff-Wild2数据库上取得了0.674的成绩。
引用
@article{arxiv.2107.04389,
title = {Action Unit Detection with Joint Adaptive Attention and Graph Relation},
author = {Chenggong Zhang and Juan Song and Qingyang Zhang and Weilong Dong and Ruomeng Ding and Zhilei Liu},
journal= {arXiv preprint arXiv:2107.04389},
year = {2021}
}