医学口罩与基于身体的情绪识别：深度学习视角下的洞察
计算机视觉与模式识别
2023-05-29 v2 机器学习
摘要
COVID-19大流行无疑改变了标准并影响了我们生活的各方面，尤其是社会交流。它迫使人们广泛佩戴医学口罩以防传播。此种面部遮挡会强烈干扰从面部读取情绪，并促使我们将整个身体作为情绪线索。本文对面部遮挡对情绪识别性能的影响进行了深入探究，并展示了完整身体输入相对于单纯被遮面罩脸的优越性。我们基于Temporal Segment Network框架利用深度学习模型，力求完全克服口罩后果。尽管面部与身体特征可从单一输入中学习，但这可能导致无关信息混淆。通过分别处理这些特征并融合其预测分数，我们更有效地利用了两种模态。该框架还通过对相邻帧间信息的混合天然支持时间建模。结合之下，这些技术构成了能有效应对关键区域所施安全协议引起情绪识别困难的系统。
引用
@article{arxiv.2302.10021,
title = {Medical Face Masks and Emotion Recognition from the Body: Insights from a Deep Learning Perspective},
author = {Nikolaos Kegkeroglou and Panagiotis P. Filntisis and Petros Maragos},
journal= {arXiv preprint arXiv:2302.10021},
year = {2023}
}
备注
8 pages