基于多架构编码器与特征融合的面部情感识别：ABAW7 挑战
计算机视觉与模式识别
2024-07-29 v2
摘要
本文提出了我们的方法，用于应对第 7 届 ABAW 竞赛的挑战。该竞赛包括三个子挑战：价值- arousal（VA）估计、表情（Expr）分类和动作单元（AU）检测。为解决这些挑战，我们采用前沿模型提取强大的视觉特征。随后，利用 Transformer 编码器来整合这些特征，以解决 VA、Expr 和 AU 子挑战。为了缓解特征维度差异带来的影响，我们引入仿射模块将特征对齐到统一维度。总体而言，我们的结果显著优于基线方法。
引用
@article{arxiv.2407.12258,
title = {Facial Affect Recognition based on Multi Architecture Encoder and Feature Fusion for the ABAW7 Challenge},
author = {Kang Shen and Xuxiong Liu and Boyan Wang and Jun Yao and Xin Liu and Yujie Guan and Yu Wang and Gengchen Li and Xiao Sun},
journal= {arXiv preprint arXiv:2407.12258},
year = {2024}
}