基于集成方法的多模态表情识别
计算机视觉与模式识别
2023-03-20 v1
摘要
本文介绍我们向第五届野外情感行为分析（ABAW）竞赛的表情分类挑战赛所提交的方法。在我们的方法中，应用多个不同预训练模型提取的多模态特征组合以捕获更有效的情感信息。对于这些视觉与音频模态特征的组合，我们利用两个时序编码器来探索数据中的时序上下文信息。此外，我们针对不同的实验设置采用若干集成策略，以获得最准确的表情识别结果。我们的系统在验证集上取得了 0.45774 的平均 F1 分数。
引用
@article{arxiv.2303.10033,
title = {Multi-modal Expression Recognition with Ensemble Method},
author = {Chuanhe Liu and Xinjie Zhang and Xiaolong Liu and Tenggan Zhang and Liyu Meng and Yuchen Liu and Yuanyuan Deng and Wenqiang Jiang},
journal= {arXiv preprint arXiv:2303.10033},
year = {2023}
}