融合身体姿态与面部表情用于儿童-机器人交互中的情感联合识别
计算机视觉与模式识别
2019-09-06 v3
摘要
本文针对儿童-机器人交互等具有挑战性场景中的多线索情感识别问题。为此，我们提出了一种自动情感识别方法，该方法利用身体表情与面部表情，而传统方法通常仅关注后者。我们基于深度学习的方法使用分层多标签标注和多阶段损失，既可以联合训练也可以单独训练，并为我们提供了针对单个模态以及全身情感的計算模型。我们在自行收集的一个具有挑战性的儿童-机器人情感表达交互数据库以及成人表演情感的 GEMEP 公共数据库上评估了我们的方法，结果表明所提方法显著优于仅基于面部表情的基线方法。
引用
@article{arxiv.1901.01805,
title = {Fusing Body Posture with Facial Expressions for Joint Recognition of Affect in Child-Robot Interaction},
author = {Panagiotis P. Filntisis and Niki Efthymiou and Petros Koutras and Gerasimos Potamianos and Petros Maragos},
journal= {arXiv preprint arXiv:1901.01805},
year = {2019}
}
备注
To be presented in IROS 2019