中文

TransFA:基于Transformer的人脸属性评估表征方法

计算机视觉与模式识别 2022-07-13 v1

摘要

人脸属性评估在视频监控与人脸分析中具有重要作用。尽管基于卷积神经网络的方法已取得很大进展,但它们不可避免地每次仅通过卷积处理一个局部邻域。此外,现有方法多将人脸属性评估视为独立的多标签分类任务,忽略了语义属性与人脸身份信息之间的内在关联。本文提出一种新颖的基于Transformer的人脸属性评估表征方法(TransFA),可在注意力机制背景下有效增强属性判别表征学习。该方法采用多分支Transformer探索相似语义区域中不同属性间的相互关联,以进行属性特征学习。特别地,设计了分层身份约束属性损失来训练端到端架构,可进一步融合人脸身份判别信息以提升性能。在多个脸属性基准上的实验结果表明,所提TransFA相比当前最优(SOTA)方法取得了更优性能。

关键词

引用

@article{arxiv.2207.05456,
  title  = {TransFA: Transformer-based Representation for Face Attribute Evaluation},
  author = {Decheng Liu and Weijie He and Chunlei Peng and Nannan Wang and Jie Li and Xinbo Gao},
  journal= {arXiv preprint arXiv:2207.05456},
  year   = {2022}
}