面向街景增强现实的语义感知标签放置

在增强现实（AR）应用中，以清晰可读且不遮挡现实世界关键信息的方式放置标签可能是一个具有挑战性的问题。本文介绍了一种用于街景场景 AR 的标签放置技术。我们通过一种新颖的特征图（称之为引导图）识别潜在重要图像区域，提出了一种语义感知的任务特定标签放置方法。给定输入图像，其显著性信息、语义信息和任务特定重要性先验被整合进引导图中以用于我们的标注任务。为学习任务先验，我们创建了一个带有用户标注偏好的标签放置数据集，并将其用于评估。我们的方案将标签放置的约束编码为一个优化问题以获得最终标签布局，标签将被放置在适当位置以减少在街景 AR 场景中覆盖重要现实世界物体的机会。实验验证清楚地显示了我们的方法相对于先前方案在 AR 街景导航及类似应用中的优势。