理解负面提示的影响：何时及如何发挥作用？
计算机视觉与模式识别
2024-06-06 v1
摘要
负面提示这一概念源自条件生成模型如Stable Diffusion，允许用户指定要从生成图像中排除的内容，%，显示出显著的实际效用。尽管负面提示广泛使用，但其内在机制仍基本未探索。本文首次进行全面研究，揭示负面提示如何及何时发挥作用。我们的广泛经验分析识别了负面提示的两种主要行为。延迟效应：负面提示的影响在正面提示呈现相应内容之后才被观察到。通过中性化删除：负面提示通过在潜在空间中与正面提示的相互抵消效应来删除生成图像中的概念。这些发现揭示了负面提示的显著潜在实际应用；例如，我们演示了负面提示通过简单自适应算法可实现最小化背景更改的图像对象填充。我们相信这些发现将为社区在充分发挥负面提示潜力方面提供宝贵见解。
引用
@article{arxiv.2406.02965,
title = {Understanding the Impact of Negative Prompts: When and How Do They Take Effect?},
author = {Yuanhao Ban and Ruochen Wang and Tianyi Zhou and Minhao Cheng and Boqing Gong and Cho-Jui Hsieh},
journal= {arXiv preprint arXiv:2406.02965},
year = {2024}
}