中文

DAVOS:基于对抗域适应的半监督视频目标分割

计算机视觉与模式识别 2021-05-25 v2

摘要

域偏移一直是视频目标分割(VOS)中的主要问题之一,模型在不熟悉的数据集上测试时性能会退化。近来,许多在线方法通过在通常稀缺的测试数据标注上进行微调,来缩小训练数据(源域)与测试数据(目标域)之间的性能差距。本文提出一种新方法,通过首次将对抗域适应引入 VOS 任务来解决域偏移问题,在源域上进行有监督训练,在目标域上进行无监督训练。通过卷积层融合外观与运动特征,并在运动分支上添加监督,我们的模型在有监督训练后在 DAVIS2016 上以 82.6% 的平均 IoU 分数取得了最先进的性能。同时,我们的对抗域适应策略在不利用额外标注的情况下,显著提升了训练模型在 FBMS59 和 Youtube-Object 上的性能。

关键词

引用

@article{arxiv.2105.10201,
  title  = {DAVOS: Semi-Supervised Video Object Segmentation via Adversarial Domain Adaptation},
  author = {Jinshuo Zhang and Zhicheng Wang and Songyan Zhang and Gang Wei},
  journal= {arXiv preprint arXiv:2105.10201},
  year   = {2021}
}