情感与文化智能AI研讨会情感预测竞赛的解决方案
人工智能
2024-04-02 v2
摘要
本报告详细描述了我们在WECIA情感预测竞赛（EPC）中探索和提出的方法，该方法通过一件艺术作品及其评论来预测一个人的情感。该竞赛的数据集是ArtELingo，旨在鼓励跨语言和跨文化的多样性研究。该数据集有两个主要挑战，即模态不平衡问题和语言文化差异问题。为了解决这个问题，我们提出了一种简单而有效的方法，称为单多模态与情感文化特定提示（ECSP），该方法侧重于使用单模态信息来增强多模态模型的性能，并使用精心设计的提示来减少文化差异问题。具体来说，我们的方法包含两个主要模块：（1）基于XLM-R\cite{conneau2019unsupervised}的单模态模型和基于X-VLM\cite{zeng2022x}的多模态模型；（2）情感文化特定提示。我们的方法在最终测试中以0.627的得分排名第一。
关键词
引用
@article{arxiv.2403.17683,
title = {Solution for Emotion Prediction Competition of Workshop on Emotionally and Culturally Intelligent AI},
author = {Shengdong Xu and Zhouyang Chi and Yang Yang},
journal= {arXiv preprint arXiv:2403.17683},
year = {2024}
}