Exploring the Interactive Guidance for Unified and Effective Image Matting
计算机视觉与模式识别
2023-12-08 v3 多媒体
摘要
最近的图像抠图研究正朝着提出无三分图或交互式方法的方向发展,以完成复杂的图像抠图任务。尽管避免了三分图标注的繁重劳动,现有方法仍然存在两个局限性:(1)对于包含多个物体的单张图像,必须提供额外的交互信息来帮助确定抠图目标;(2)对于透明物体,从RGB图像精确回归alpha遮罩比不透明物体困难得多。在这项工作中,我们提出了一种统一交互式图像抠图方法,名为UIM,它解决了这些局限性,并为任何场景实现了令人满意的抠图结果。具体来说,UIM利用多种类型的用户交互来避免多个抠图目标的歧义性,并且我们详细比较了不同标注类型的优缺点。为了统一透明和不透明物体的抠图性能,我们将图像抠图解耦为两个阶段,即前景分割和透明度预测。此外,我们设计了一个多尺度注意力融合模块来减轻边界区域的模糊性。实验结果表明,UIM在Composition-1K测试集和一个合成的统一数据集上达到了最先进的性能。
引用
@article{arxiv.2205.08324,
title = {Exploring the Interactive Guidance for Unified and Effective Image Matting},
author = {Dinghao Yang and Bin Wang and Weijia Li and Yiqi Lin and Conghui He},
journal= {arXiv preprint arXiv:2205.08324},
year = {2023}
}