通过桥接生成与分割完成视觉对象
计算机视觉与模式识别
2024-02-05 v2
摘要
本文提出了一种新颖的对象补全方法，其主要目标是从部分可见的组件重建完整对象。我们的方法名为MaskComp，通过生成与分割的迭代阶段来刻画补全过程。在每次迭代中，对象掩码作为附加条件提供以增强图像生成，反之，生成的图像可通过融合图像分割获得更精确的掩码。我们证明，一次生成与一次分割阶段的组合有效地充当了掩码去噪器。通过在生成与分割阶段之间交替，部分对象掩码被逐步细化，提供精确的形状引导并产生优越的对象补全结果。我们的实验证明了MaskComp相对于现有方法（如ControlNet和Stable Diffusion）的优越性，将其确立为对象补全的有效解决方案。
引用
@article{arxiv.2310.00808,
title = {Completing Visual Objects via Bridging Generation and Segmentation},
author = {Xiang Li and Yinpeng Chen and Chung-Ching Lin and Hao Chen and Kai Hu and Rita Singh and Bhiksha Raj and Lijuan Wang and Zicheng Liu},
journal= {arXiv preprint arXiv:2310.00808},
year = {2024}
}