顺序感知交互式分割
计算机视觉与模式识别
2025-02-10 v3 人工智能
摘要
交互式分割旨在以最少的用户交互实现对目标对象的精确分割。然而，当前方法往往难以准确地将目标对象与背景分离，因为它们对场景中对象相对深度顺序的理解有限。为此，我们提出了 OIS：顺序感知交互式分割，其中我们显式地将对象之间的相对深度编码到顺序图中。我们引入了一种新颖的顺序感知注意力机制，使顺序图能够无缝地引导用户交互（以点击形式）关注图像特征。我们进一步提出了一种对象感知注意力模块，以更好地区分具有相似顺序的对象。我们的方法允许稠密和稀疏的用户点击两种方式的集成，显著提升了准确性和效率。实验结果表明，OIS 在 HQSeg44K 数据集上实现了领先的性能，一个点击后 mIoU 分别比前沿的 SegNext 提升了 7.61 和 1.32；同时，推理速度也提升了约一倍。项目页面为 https://ukaukaaaa.github.io/projects/OIS/index.html
引用
@article{arxiv.2410.12214,
title = {Order-aware Interactive Segmentation},
author = {Bin Wang and Anwesa Choudhuri and Meng Zheng and Zhongpai Gao and Benjamin Planche and Andong Deng and Qin Liu and Terrence Chen and Ulas Bagci and Ziyan Wu},
journal= {arXiv preprint arXiv:2410.12214},
year = {2025}
}
备注
Accepted by ICLR 2025 Interactive demo can be found in project page: https://ukaukaaaa.github.io/projects/OIS/index.html