中文

面向ABAW4多任务挑战的双方面信息融合模型

计算机视觉与模式识别 2022-07-26 v1 人工智能

摘要

本文提出第4届野外情感行为分析(ABAW)竞赛多任务学习(MTL)挑战赛的解决方案。ABAW的任务是根据视频预测帧级情绪描述符:离散情绪状态;效价与唤醒度;以及动作单元。尽管研究者已提出多种方法并在ABAW中取得可喜结果,当前该任务的工作很少考虑不同情绪描述符之间的交互。为此,我们提出一种新颖的端到端架构以实现不同类型信息的充分融合。实验结果证明了我们所提方案的有效性。

关键词

引用

@article{arxiv.2207.11389,
  title  = {Two-Aspect Information Fusion Model For ABAW4 Multi-task Challenge},
  author = {Haiyang Sun and Zheng Lian and Bin Liu and Jianhua Tao and Licai Sun and Cong Cai},
  journal= {arXiv preprint arXiv:2207.11389},
  year   = {2022}
}