文化遗址中的自中心视角访客定位

我们考虑从自中心（第一人称）图像中定位文化遗址中的访客的问题。定位信息既可用于在访客参观期间提供辅助（例如建议去何处、接下来看什么），也可为文化遗址管理者提供行为信息（例如访客在某给定位置停留多久？最喜欢什么？）。为解决这个问题，我们使用两种相机收集了大量自中心视频数据集：头戴式HoloLens设备与胸挂式GoPro。每一帧均根据访客位置及其注视对象进行了标注。该数据集已免费公开以鼓励此领域的研究。数据集辅以采用最先进的基于位置的 ego-centric 视频时间分割方法的基线实验。实验表明，可为访客与遗址管理者提取有用信息并取得引人注目的结果。