什么与我的沙发相配：面向室内设计的多模态搜索引擎
计算机视觉与模式识别
2018-01-09 v2
摘要
在本文中，我们提出了一种结合视觉和文本查询的面向室内设计的多模态搜索引擎。我们引擎的目标是检索与查询具有视觉和美学相似性的室内物品，例如家具或挂钟。我们的搜索引擎允许用户拍摄房间照片，并以高召回率检索出与照片中存在的物品相同或视觉相似的物品列表。此外，它还能返回在美学和风格上相互匹配的其他物品。为实现这一目标，我们的系统融合了使用文本和视觉模态获得的结果。得益于这种融合策略，我们将检索物品的平均风格相似度得分提高了 11%。我们的工作实现为 Web 应用程序，计划向公众开放。
引用
@article{arxiv.1707.06907,
title = {What Looks Good with my Sofa: Multimodal Search Engine for Interior Design},
author = {Ivona Tautkute and Aleksandra Możejko and Wojciech Stokowiec and Tomasz Trzciński and Łukasz Brocki and Krzysztof Marasek},
journal= {arXiv preprint arXiv:1707.06907},
year = {2018}
}
备注
FEDCSIS 5th Conference on Multimedia, Interaction, Design and Innovation (MIDI), 2017