Robust-MSA：理解模态噪声对多模态情感分析的影响
多媒体
2022-11-28 v1
摘要
提升模型针对潜在模态噪声的鲁棒性，作为将多模态模型适配到实际应用的关键步骤，已受到研究人员的日益关注。对于多模态情感分析 (MSA)，关于多模态模型是否比单模态模型更能有效应对含噪特征，也存在争论。为直观展示并深入分析这些关切，我们提出 Robust-MSA，一个可可视化模态噪声影响及简单防御方法的交互式平台，以帮助研究人员更好地理解其模型在不完美真实世界数据下的表现。
引用
@article{arxiv.2211.13484,
title = {Robust-MSA: Understanding the Impact of Modality Noise on Multimodal Sentiment Analysis},
author = {Huisheng Mao and Baozheng Zhang and Hua Xu and Ziqi Yuan and Yihe Liu},
journal= {arXiv preprint arXiv:2211.13484},
year = {2022}
}
备注
Accept by AAAI 2023. Code is available at https://github.com/thuiar/Robust-MSA