哪个模型生成了这幅图？一种面向模型的起源归因方法
计算机视觉与模式识别
2024-07-19 v2
摘要
近期进展使视觉生成模型能够生成高质量图像。为防止生成图像的滥用，识别其生成来源模型至关重要。本文研究仅能获取少量源模型生成图像且无法访问源模型的情境下的图像来源归因问题。目标是判断给定图像是否由特定源模型生成。我们首先将此问题形式化为 few-shot 单类分类任务。为解决该任务，我们提出 OCC-CLIP 框架，基于 CLIP 的 few-shot 单类分类方法，使其能够在多个候选模型中识别图像的来源模型。大量实验覆盖各种生成模型，验证了 OCC-CLIP 框架的有效性。此外，基于近期发布的 DALL-E 3 API 的实验验证了该方案的实际应用价值。
关键词
引用
@article{arxiv.2404.02697,
title = {Which Model Generated This Image? A Model-Agnostic Approach for Origin Attribution},
author = {Fengyuan Liu and Haochen Luo and Yiming Li and Philip Torr and Jindong Gu},
journal= {arXiv preprint arXiv:2404.02697},
year = {2024}
}