HiCOMEX：基于层级强度分布与COMEX关系学习的面部动作单元识别
计算机视觉与模式识别
2021-04-30 v3
摘要
由于面部动作单元（AUs）具有广泛的应用前景，其检测问题已得到研究。本文中，我们提出了一种从单张输入图像中检测AU的新框架，通过捕捉AU之间的共现与互斥（COMEX）关系以及强度分布来实现。我们的算法利用面部关键点检测局部AU的特征。这些特征被输入到双向长短期记忆（BiLSTM）层中以学习强度分布。随后，新的AU特征连续通过自注意力编码层和连续状态现代Hopfield层以学习COMEX关系。我们在具有挑战性的BP4D和DISFA基准上进行了实验，未使用任何外部数据或预训练模型，分别取得了63.7%和61.8%的F1分数，表明我们所提出的网络能够提升AU检测任务的性能。
引用
@article{arxiv.2009.10892,
title = {HiCOMEX: Facial Action Unit Recognition Based on Hierarchy Intensity Distribution and COMEX Relation Learning},
author = {Ziqiang Shi and Liu Liu and Zhongling Liu and Rujie Liu and Xiaoyu Mi and and Kentaro Murase},
journal= {arXiv preprint arXiv:2009.10892},
year = {2021}
}