基于对比注意力机制的多模态讽刺检测
计算与语言
2021-10-01 v1
摘要
在过去十年中，讽刺检测主要在文本场景下开展。随着视频交流的普及，多模态场景下的分析近年来受到广泛关注。因此，旨在检测视频对话中讽刺行为的多模态讽刺检测，在自然语言处理社区和多模态分析社区中变得日益热门。本文考虑到讽刺常通过模态间的不一致传达（例如文本表达赞美而声学语调表示抱怨），构建了基于对比注意力的讽刺检测（ConAttSD）模型，该模型使用模态间对比注意力机制为话语提取若干对比特征。对比特征表征两个模态间信息的不一致性。我们在多模态讽刺基准数据集 MUStARD 上的实验证明了所提 ConAttSD 模型的有效性。
引用
@article{arxiv.2109.15153,
title = {Multi-Modal Sarcasm Detection Based on Contrastive Attention Mechanism},
author = {Xiaoqiang Zhang and Ying Chen and Guangyuan Li},
journal= {arXiv preprint arXiv:2109.15153},
year = {2021}
}
备注
NLPCC 2021