CLIP 对纹理的理解程度如何?
计算机视觉与模式识别
2022-11-08 v2
摘要
我们研究了 CLIP 对自然语言中描述的自然图像纹理的理解程度。为此,我们分析了 CLIP 的以下能力:(1)在各种纹理与材料分类数据集上进行零样本学习;(2)在 Describable Texture in Detail(DTDD)数据集上表示纹理的组合属性,如红点或有黄色条纹;(3)辅助对由身体部位的颜色和纹理描述的照片中鸟类进行细粒度分类。
引用
@article{arxiv.2203.11449,
title = {How well does CLIP understand texture?},
author = {Chenyun Wu and Subhransu Maji},
journal= {arXiv preprint arXiv:2203.11449},
year = {2022}
}
备注
ECCV 2022 CVinW Workshop