ReMOVE：一种用于物体擦除的无参考度量
计算机视觉与模式识别
2024-09-04 v1 人工智能
机器学习
摘要
我们提出 ，一种新颖的无参考度量，用于评估基于扩散的图像编辑模型在生成后擦除物体的效果。与 LPIPS 和 CLIPScore 等现有度量不同， 解决了在没有参考图像的情况下评估图像修复的难题，这在实际场景中很常见。它能有效区分物体移除和物体替换。由于图像生成的随机性，这是扩散模型中的一个关键问题。传统度量无法与图像修复的直观定义保持一致，该定义旨在 (1) 在遮罩区域内无缝移除物体 (2) 同时保持背景的连续性。 不仅与最先进的度量相关，并与人类感知一致，而且还能捕捉图像修复过程中细微的方面，从而对生成输出提供更细粒度的评估。
引用
@article{arxiv.2409.00707,
title = {ReMOVE: A Reference-free Metric for Object Erasure},
author = {Aditya Chandrasekar and Goirik Chakrabarty and Jai Bardhan and Ramya Hebbalaguppe and Prathosh AP},
journal= {arXiv preprint arXiv:2409.00707},
year = {2024}
}
备注
Accepted at The First Workshop on the Evaluation of Generative Foundation Models (EvGENFM) at CVPR 2024