通过联合学习人脸关键点检测与域分离重建提升面部动作单元检测
计算机视觉与模式识别
2024-09-24 v5 人工智能
机器学习
多媒体
摘要
近来，如何将大量无标注的野外人脸图像引入有监督的面部动作单元（AU）检测框架成为一个具有挑战性的问题。本文提出一种新的AU检测框架，其中引入了多任务学习，通过共享同构人脸提取模块的参数为联合学习AU域分离与重建以及人脸关键点检测。此外，我们提出了一种基于对比学习的特征对齐方案，使用简单投影器与改进的对比损失，增加了四个额外的中间监督以促进特征重建过程。在两个基准上的实验结果证明了我们在野外AU检测上相对于最先进方法的优越性。
引用
@article{arxiv.2310.05207,
title = {Boosting Facial Action Unit Detection Through Jointly Learning Facial Landmark Detection and Domain Separation and Reconstruction},
author = {Ziqiao Shang and Li Yu},
journal= {arXiv preprint arXiv:2310.05207},
year = {2024}
}
备注
5 pages, 1 figure