中文

基于面部表情的感伤情绪自动检测

计算机视觉与模式识别 2022-09-13 v1

摘要

近 20 年来,情绪识别受到了计算机视觉界的相当关注。然而,大多数研究集中于分析六种基本情绪(如喜悦、愤怒、惊讶),针对其他情感状态的工作有限。本文处理感伤情绪(强烈的心暖或怀旧感受)这一文献中极少涉及、且无定义其面部标志指南的新情绪状态。为此,我们首先收集一个包含 4.9K 段参与者观看感伤与非感伤广告视频的数据集,然后标注广告中引发感伤情绪的片段。其次,我们利用广告级标签及跨不同帧的面部动作单元(AUs)激活来定义一些弱帧级感伤标签。第三,我们使用 AUs 激活训练一个多层感知机(MLP)用于感伤检测。最后,我们定义两个新的广告级指标来评估模型性能。定量与定性结果显示了感伤检测的良好前景。据我们所知,这是首个解决感伤检测问题的工作。

关键词

引用

@article{arxiv.2209.04908,
  title  = {Automatic Detection of Sentimentality from Facial Expressions},
  author = {Mina Bishay and Jay Turcot and Graham Page and Mohammad Mavadati},
  journal= {arXiv preprint arXiv:2209.04908},
  year   = {2022}
}

备注

Accepted in ICIP 2022