重新思考零样本学习:一种条件视觉分类视角
计算机视觉与模式识别
2019-11-28 v2
摘要
零样本学习(ZSL)旨在仅基于类的语义描述来识别未见类的实例。现有算法通常将其表述为语义-视觉对应问题,通过学习从一个特征空间到另一个特征空间的映射来解决。尽管合理,以往方法本质上以隐式方式丢弃了视觉特征高度宝贵的判别能力,从而产生不理想的结果。我们转而将ZSL重新表述为条件视觉分类问题,即基于从语义描述学习到的分类器对视觉特征进行分类。借助这一重新表述,我们开发了针对各种ZSL设置的算法:对于常规设置,我们提出训练一个深度神经网络,以基于片段的训练方案直接从语义属性生成视觉特征分类器;对于广义设置,我们将所见类学习到的高判别力分类器与未见类生成分类器拼接,以对所有类的视觉特征进行分类;对于直推式设置,我们利用无标签数据,通过一种新颖的免遗忘自训练机制有效校准分类器生成器,并由鲁棒的广义交叉熵损失引导该过程。大量实验表明,我们所提算法在所有ZSL设置的大部分基准数据集上以显著优势大幅优于最先进方法。我们的代码可在 \url{https://github.com/kailigo/cvcZSL} 获取。
引用
@article{arxiv.1909.05995,
title = {Rethinking Zero-Shot Learning: A Conditional Visual Classification Perspective},
author = {Kai Li and Martin Renqiang Min and Yun Fu},
journal= {arXiv preprint arXiv:1909.05995},
year = {2019}
}
备注
Accepted to ICCV 2019. First update: add project link and correct some typos