中文

树能量损失:面向稀疏标注语义分割

计算机视觉与模式识别 2022-03-23 v2

摘要

稀疏标注语义分割(SASS)旨在利用粗粒度(即点、涂鸦与块级)监督训练分割网络,其中每幅图像仅有一小部分像素被标注。本文中,我们提出一种用于 SASS 的新型树能量损失,为未标注像素提供语义引导。树能量损失将图像表示为最小生成树以建模低层与高层成对亲和力。通过将这些亲和力顺序应用于网络预测,以由粗到细的方式生成未标注像素的软伪标签,实现动态在线自训练。树能量损失有效且易于通过与传统分割损失结合而纳入现有框架。与以往 SASS 方法相比,我们的方法无需多阶段训练策略、交替优化过程、额外监督数据或耗时后处理,同时在所有 SASS 设定下均优于它们。代码见 https://github.com/megvii-research/TreeEnergyLoss。

关键词

引用

@article{arxiv.2203.10739,
  title  = {Tree Energy Loss: Towards Sparsely Annotated Semantic Segmentation},
  author = {Zhiyuan Liang and Tiancai Wang and Xiangyu Zhang and Jian Sun and Jianbing Shen},
  journal= {arXiv preprint arXiv:2203.10739},
  year   = {2022}
}

备注

Accepted by CVPR2022