面部表情篡改的检测与定位
计算机视觉与模式识别
2021-03-16 v1
摘要
对社交媒体中广泛传播的欺诈性图像/视频的担忧，使得对此类欺诈的精确检测成为必要。面部表情在交流中的重要性广为人知，而对抗性攻击常聚焦于操纵与表情相关的特征。因此，开发能够检测面部表情篡改并定位被篡改区域的方法十分重要。为解决该问题，我们提出一种框架，通过面部表情识别与图像篡改方法的紧密结合来检测面部表情中的篡改。借助从面部表情识别框架提取的特征图，我们的篡改检测器能够定位被篡改区域。我们表明，在存在大量表情篡改的 Face2Face 数据集上，相比 SOTA 方法，我们的方法在篡改分类与定位上均取得超过 3% 的更高准确率。此外，在嘴部区域对应面部表情被修改的 NeuralTextures 数据集上的结果表明，篡改分类与定位准确率均高出 2%。我们证明，在表情未被篡改而是身份被改变的情况下，该方法表现与 SOTA 方法相当，从而确保了方法的泛化能力。
引用
@article{arxiv.2103.08134,
title = {Detection and Localization of Facial Expression Manipulations},
author = {Ghazal Mazaheri and Amit K. Roy-Chowdhury},
journal= {arXiv preprint arXiv:2103.08134},
year = {2021}
}