Auto-Retoucher(ART)——一种用于背景替换与图像编辑的框架

替换背景并同时调整前景物体是图像编辑中的一项具有挑战性的任务。当前生成此类图像的技术严重依赖用户在图像编辑软件中的交互，这对专业修图师而言是一项繁琐的工作。为减轻其工作负担，在生成给定背景图像方面已取得一些令人振奋的进展。然而，这些模型既不能调整前景物体的位置与尺度，也无法保证前景与背景之间的语义一致性。为克服这些局限，我们提出一种框架——ART（Auto-Retoucher，自动修图器），以生成具有充分语义与空间一致性的图像。图像首先经语义抠图与场景解析模块处理，随后一个多任务验证模型将为当前的背景与位置设定给出两个置信度分数。我们证明，我们联合优化的验证模型成功改善了视觉一致性，且我们的ART框架在以人体为前景的图像上表现良好。