OpenMPR：利用多模态数据为视障人士进行地点识别
计算机视觉与模式识别
2019-09-17 v1
摘要
地点识别在导航辅助中至关重要，也是辅助技术的难题。由于数据库与查询图像间的各种变化，地点识别易发生定位错误。面向视障人士可穿戴辅助设备，我们提出开源地点识别算法OpenMPR，利用多模态数据解决地点识别中的挑战性问题。相比传统地点识别，所提OpenMPR不仅利用多种有效描述子，还在图像匹配中对这些描述子赋予不同权重。将GNSS数据融入算法，采用基于锥的序列搜索以实现鲁棒地点识别。实验表明，该算法能解决真实场景中的地点识别问题，并在辅助导航性能上超越SOTA算法。在真实世界测试集上，在线OpenMPR在无光照变化时以100%召回率取得88.7%精度，在光照变化时以99.3%召回率取得57.8%精度。OpenMPR见于 https://github.com/chengricky/OpenMultiPR。
引用
@article{arxiv.1909.06795,
title = {OpenMPR: Recognize Places Using Multimodal Data for People with Visual Impairments},
author = {Ruiqi Cheng and Kaiwei Wang and Jian Bai and Zhijie Xu},
journal= {arXiv preprint arXiv:1909.06795},
year = {2019}
}
备注
The paper is accepted by the special issue of Measurement Science and Engineering