中文

情感视频内容分析:十年综述与新视角

计算机视觉与模式识别 2024-01-19 v2 人工智能

摘要

视频内容语义丰富,能够引发观众的各种情绪。近年来,随着情感计算的快速发展和视觉数据的爆炸式增长,情感视频内容分析(AVCA)作为情感计算的重要分支已成为广泛研究的课题。在本研究中,我们全面回顾了过去十年AVCA的发展,特别关注用于应对视频特征提取、表达主观性和多模态特征融合三大挑战的最先进方法。我们首先介绍AVCA中广泛使用的情绪表示模型并描述常用数据集。我们从以下方面总结并比较代表性方法:(1)单模态AVCA模型,包括面部表情识别和姿态情绪识别;(2)多模态AVCA模型,包括特征融合、决策融合和基于注意力的多模态模型;(3)模型性能评估标准。最后,我们讨论未来的挑战和有意义的研究方向,如情绪识别与舆情分析、人机交互和情感智能。

关键词

引用

@article{arxiv.2310.17212,
  title  = {Affective Video Content Analysis: Decade Review and New Perspectives},
  author = {Junxiao Xue and Jie Wang and Xuecheng Wu and Qian Zhang},
  journal= {arXiv preprint arXiv:2310.17212},
  year   = {2024}
}