Texel-Att:基于属性表示与分类基本单元纹理的方法
计算机视觉与模式识别
2019-09-02 v2 机器学习
摘要
基本单元纹理是一种由可命名的元素(即texels[1])按特定统计分布分布而形成的纹理;它在纺织、时尚和室内设计等许多行业中至关重要。最先进的纹理描述符未能恰当地刻画基本单元纹理,因此我们提出Texel-Att以填补这一空白。Texel-Att是首个针对基本单元纹理的细粒度、基于属性的表示与分类框架。它首先识别texels,用个体属性刻画它们;随后,通过布局属性对texels进行分组和刻画,从而得到Texel-Att表示。Texels由在全新基本单元纹理数据集ElBa上训练的Mask-RCNN检测,该数据集包含30K张纹理图像和3M个完全标注的texels。我们展示了个体与布局属性的示例,以窥见可实现的粒度水平。在实验中,我们给出检测结果以表明texels可被精确识别,即使在“野生”纹理上也是如此;为此,我们识别了可描述纹理数据集(DTD)中的基本单元类别,其中近900K个texels被手动标注,由此得到基于元素的DTD(E-DTD)。随后,分类与排序结果证明了Texel-Att在ElBa和E-DTD上的表现力,超越了替代特征和相对属性,在某些情况下性能翻倍;最后,我们报告了在ElBa和E-DTD上的交互式搜索结果:在E-DTD数据集上使用Texel-Att,我们能在10次迭代内于90%的案例中定位到所需纹理,而使用现有最精细属性组合仅达到71%。数据集与代码见 https://github.com/godimarcovr/Texel-Att
引用
@article{arxiv.1908.11127,
title = {Texel-Att: Representing and Classifying Element-based Textures by Attributes},
author = {Marco Godi and Christian Joppi and Andrea Giachetti and Fabio Pellacini and Marco Cristani},
journal= {arXiv preprint arXiv:1908.11127},
year = {2019}
}
备注
Accepted as oral at BMVC 2019