中文

Exploring the Interactive Guidance for Unified and Effective Image Matting

计算机视觉与模式识别 2023-12-08 v3 多媒体

摘要

最近的图像抠图研究正朝着提出无三分图或交互式方法的方向发展,以完成复杂的图像抠图任务。尽管避免了三分图标注的繁重劳动,现有方法仍然存在两个局限性:(1)对于包含多个物体的单张图像,必须提供额外的交互信息来帮助确定抠图目标;(2)对于透明物体,从RGB图像精确回归alpha遮罩比不透明物体困难得多。在这项工作中,我们提出了一种统一交互式图像抠图方法,名为UIM,它解决了这些局限性,并为任何场景实现了令人满意的抠图结果。具体来说,UIM利用多种类型的用户交互来避免多个抠图目标的歧义性,并且我们详细比较了不同标注类型的优缺点。为了统一透明和不透明物体的抠图性能,我们将图像抠图解耦为两个阶段,即前景分割和透明度预测。此外,我们设计了一个多尺度注意力融合模块来减轻边界区域的模糊性。实验结果表明,UIM在Composition-1K测试集和一个合成的统一数据集上达到了最先进的性能。

关键词

引用

@article{arxiv.2205.08324,
  title  = {Exploring the Interactive Guidance for Unified and Effective Image Matting},
  author = {Dinghao Yang and Bin Wang and Weijia Li and Yiqi Lin and Conghui He},
  journal= {arXiv preprint arXiv:2205.08324},
  year   = {2023}
}