FlexEdit：灵活可控的基于扩散模型的对象中心图像编辑

我们的工作解决了以往以对象为中心的编辑方法中存在的局限性，例如由于形状差异导致的不真实结果以及在对象替换或插入时控制受限。为此，我们引入了 FlexEdit，一个灵活且可控的对象编辑框架，我们在每个去噪步骤中使用 FlexEdit 模块迭代地调整潜变量。最初，我们在测试时优化潜变量以符合指定的对象约束。然后，我们的框架采用自适应掩码（在去噪过程中自动提取），以保护背景，同时将新内容无缝融合到目标图像中。我们展示了 FlexEdit 在各种对象编辑任务中的多功能性，并策划了一个评估测试套件，包含来自真实和合成图像的样本，以及专为以对象为中心的编辑设计的新颖评估指标。我们在不同的编辑场景下进行了大量实验，证明了我们的编辑框架优于最近先进的文本引导图像编辑方法。我们的项目页面发布于 https://flex-edit.github.io/。