利用 WordNet 进行情感标注图像的标记与检索
信息检索
2017-12-06 v2 人机交互
摘要
具有语义和情感内容描述的图像库是情感计算和人机交互等众多领域的宝贵工具，同时也对开发多模态可搜索在线数据库至关重要。互联网上日益增长的图像文档数量不断激励着研究者探索更好的标注模型和更高效的检索方法，这些方法利用语义、场景、对象、事件、上下文和情感的混合数据。此类高层语义的形式化知识表示需要丰富、明确且既适合人类又适合机器处理的信息。为实现这些目标，我们提出了一种基于本体的在线图像标注工具 WNtags，并利用国际情感图片系统 (International Affective Picture System) 数据库展示了其在知识表示和图像检索中的实用性。WNtags 使用 WordNet 作为图像标记词汇表，但将建议上层合并本体 (Suggested Upper Merged Ontology) 视为首选的上层标记形式体系。检索过程利用节点距离度量来建立查询与协作加权标记（描述高层图像语义）之间的语义相关性，随后根据推导出的重要性对结果进行排序。我们还阐述了改进 WNtags 的计划，旨在创建一个用于人类情感和注意力研究的协作式基于 Web 的多媒体存储库。
引用
@article{arxiv.1304.0954,
title = {Labeling and Retrieval of Emotionally-Annotated Images using WordNet},
author = {Marko Horvat and Anton Grbin and Gordan Gledec},
journal= {arXiv preprint arXiv:1304.0954},
year = {2017}
}
备注
16 pages, 4 figures. arXiv admin note: substantial text overlap with arXiv:1302.2223