主题至关重要：基于主题注意力的服饰搭配兼容性学习
计算机视觉与模式识别
2020-10-06 v3
摘要
服饰搭配兼容性学习对诸多时尚市场（如穿搭组合与在线时尚推荐）十分重要。与以往工作不同，我们认为服饰兼容性不仅是视觉外观兼容问题，也是主题至关重要的问题。一套由若干时尚单品（如上衣、西装、鞋等）组成的穿搭，在“约会”场合被视为兼容，但在“商务”场合可能并不兼容。本文旨在解决给定特定主题下的服饰兼容性问题。为此，我们构建了首个真实世界的主题感知时尚数据集，包含约14K套标注有32个主题的穿搭。该数据集中有超过40K件标注有152个细粒度类别的时尚单品。我们还提出了一种在给定特定主题下学习服饰兼容性的注意力模型。它始于类别特定子空间学习，将特定类别中兼容的穿搭单品投影到子空间内相近的位置。得益于时尚主题与类别之间的强关联，我们进而在类别特定嵌入空间上构建主题注意力模型。该模型通过注意力将主题与成对兼容性相关联，从而计算出整套穿搭的兼容性。据我们所知，这是首次尝试在给定主题条件下估计穿搭兼容性。我们在新数据集上进行了广泛的定性与定量实验。我们的方法优于当前最先进的方法。
引用
@article{arxiv.1912.06227,
title = {Theme-Matters: Fashion Compatibility Learning via Theme Attention},
author = {Jui-Hsin Lai and Bo Wu and Xin Wang and Dan Zeng and Tao Mei and Jingen Liu},
journal= {arXiv preprint arXiv:1912.06227},
year = {2020}
}