行人会注意吗？自然环境下的眼神接触检测
计算机视觉与模式识别
2021-12-09 v1
摘要
在城市或拥挤环境中，人类依靠眼神接触与附近的人进行快速高效的沟通。自主智能体也需要检测眼神接触，以便与行人互动并安全地在他们周围导航。本文聚焦于自然环境下的眼神接触检测，即自动驾驶车辆在无法控制环境或行人距离的真实场景中的检测。我们引入了一个利用语义关键点检测眼神接触的模型，并表明这种高层表示在公开数据集 JAAD 上取得了 state-of-the-art 的结果，且相比于在端到端网络中利用原始图像，具有更好的泛化特性。为了研究领域自适应，我们创建了 LOOK：一个用于自然环境下眼神接触检测的大规模数据集，其专注于真实世界泛化的多样且无约束的场景。为了开放科学使命，源代码和 LOOK 数据集已公开分享。
引用
@article{arxiv.2112.04212,
title = {Do Pedestrians Pay Attention? Eye Contact Detection in the Wild},
author = {Younes Belkada and Lorenzo Bertoni and Romain Caristan and Taylor Mordan and Alexandre Alahi},
journal= {arXiv preprint arXiv:2112.04212},
year = {2021}
}
备注
Project website: https://looking-vita-epfl.github.io