结合特征融合的局部区域感知与关系学习用于面部动作单元检测
计算机视觉与模式识别
2023-03-21 v2
摘要
人类情感行为分析在人机交互（HCI）系统中起着至关重要的作用。本文介绍我们向CVPR 2023野外情感行为分析（ABAW）竞赛提交的方案。我们提出了一种单阶段训练的AU检测框架。具体而言，为有效提取与AU检测相关的面部局部区域特征，我们使用局部区域感知模块来有效提取不同AU的特征。同时，我们使用基于图神经网络的关系学习模块来捕获AU之间的关系。此外，考虑到目标人脸整体特征对AU检测的作用，我们还使用特征融合模块来融合骨干网络提取的特征信息与关系学习模块提取的AU特征信息。我们也采用了一些采样方法、数据增强技术与后处理策略以进一步提升模型性能。
引用
@article{arxiv.2303.08545,
title = {Local Region Perception and Relationship Learning Combined with Feature Fusion for Facial Action Unit Detection},
author = {Jun Yu and Renda Li and Zhongpeng Cai and Gongpeng Zhao and Guochen Xie and Jichao Zhu and Wangyuan Zhu},
journal= {arXiv preprint arXiv:2303.08545},
year = {2023}
}