GeoWINE：基于地理定位的 Wiki、图像、新闻与事件检索
信息检索
2021-05-05 v2 多媒体
摘要
在社交媒体背景下，对新闻或事件的地理定位推断已成为一项非常重要的任务。本文我们展示 GeoWINE（基于地理定位的 Wiki-图像-新闻-事件检索）演示系统，一个仅需单张图像作为输入的有效模块化多模态检索系统。GeoWINE 系统由五个模块组成，以从多种来源检索相关信息。第一模块为最先进的图像地理定位估计模型。第二模块使用 Wikidata 知识图谱执行基于地理空间的实体检索查询。第三模块利用四种不同的图像嵌入表示，用于检索与输入图像最相似的实体。这些嵌入派生自地理定位估计、地点识别、基于 ImageNet 的图像分类及其组合等任务。最后两个模块从 EventRegistry 与开放事件知识图谱（OEKG）执行新闻与事件检索。GeoWINE 为终端用户提供直观界面，并对专家重新配置至个性化设置具有启发性。GeoWINE 在 Google Landmarks 数据集上实现了有前景的图像实体标签预测结果。该演示系统公开于 http://cleopatra.ijs.si/geowine/。
引用
@article{arxiv.2104.14994,
title = {GeoWINE: Geolocation based Wiki, Image,News and Event Retrieval},
author = {Golsa Tahmasebzadeh and Endri Kacupaj and Eric Müller-Budack and Sherzod Hakimov and Jens Lehmann and Ralph Ewerth},
journal= {arXiv preprint arXiv:2104.14994},
year = {2021}
}
备注
Accepted for publication in: International ACM SIGIR Conference on Research and Development in Information Retrieval 2021