Behaviour4All:自然场景面部行为分析工具包
计算机视觉与模式识别
2024-09-27 v1
摘要
本文介绍了 Behavior4All,一个全面的开源自然场景面部行为分析工具包,它将人脸定位、效价-唤醒度估计、基本表情识别和动作单元检测集成于一个单一框架中。Behaviour4All 提供仅 CPU 和 GPU 加速两种版本,利用了 12 个大规模自然场景数据集,包含来自不同人口群体的超过 500 万张图像。它引入了一个新颖的框架,利用分布匹配和标签协同标注来解决具有非重叠标注的任务,编码了它们相关性的先验知识。在同类最大规模的研究中,Behaviour4All 在所有数据库和任务上的整体性能以及公平性方面,均优于最先进的方法和其他工具包。它还在未见过的数据库和复合表情识别上展示了卓越的泛化能力。最后,Behaviour4All 的速度比其他工具包快很多倍。
引用
@article{arxiv.2409.17717,
title = {Behaviour4All: in-the-wild Facial Behaviour Analysis Toolkit},
author = {Dimitrios Kollias and Chunchang Shao and Odysseus Kaloidas and Ioannis Patras},
journal= {arXiv preprint arXiv:2409.17717},
year = {2024}
}