内容感知的时间元数据篡改检测
计算机视觉与模式识别
2022-03-14 v2 机器学习
摘要
大多数在线分享的图片都附带时间元数据（即拍摄的日期和时间），这使得将图像内容与现实世界事件关联起来成为可能。恶意操纵该元数据会传达扭曲的现实版本。在这项工作中，我们提出了检测时间戳篡改这一新兴问题。我们提出一种端到端方法来验证一张户外图像的声称拍摄时间是否与其内容和地理位置一致。我们考虑对照片拍摄的小时和/或月份进行的篡改。核心思想是使用有监督的一致性验证，其中我们预测图像内容、拍摄时间和地理位置一致的概率。我们还包括一对辅助任务，可用于解释网络决策。我们的方法在大型基准数据集上改进了先前的工作，将分类准确率从 59.0% 提升到 81.1%。我们进行了消融研究，突出了方法各组件的重要性，展示了使用我们的方法可检测哪些类型的篡改。最后，我们演示了在所提方法如何被用于在没有时间戳的元数据中估计可能的拍摄时间。
引用
@article{arxiv.2103.04736,
title = {Content-Aware Detection of Temporal Metadata Manipulation},
author = {Rafael Padilha and Tawfiq Salem and Scott Workman and Fernanda A. Andaló and Anderson Rocha and Nathan Jacobs},
journal= {arXiv preprint arXiv:2103.04736},
year = {2022}
}