MagicEyes：面向混合现实的大规模眼动凝视估计数据集
计算机视觉与模式识别
2020-03-20 v1 人机交互
机器学习
图像与视频处理
摘要
随着虚拟现实与混合现实（XR）设备的出现，眼动追踪在计算机视觉界受到显著关注。眼动凝视估计是 XR 中的关键组件——可实现节能渲染、多焦点显示以及与内容的有效交互。在头戴式 XR 设备中，眼睛以离轴方式成像以避免遮挡视场。这增加了推断眼部相关量的挑战，同时也为开发准确且鲁棒的基于学习的方法提供了机会。为此，我们提出 MagicEyes，这是首个使用真实 MR 设备采集并带有全面真值标注的大规模眼睛数据集。MagicEyes 包含 名受试者，具有 张人工标注真值图像和超过 张带凝视目标标签的图像。我们在 MagicEyes 上评估了几种最先进的方法，并提出了一种新的多任务 EyeNet 模型，旨在单次前向传播中检测角膜、反光点和瞳孔以及进行眼睛分割。
引用
@article{arxiv.2003.08806,
title = {MagicEyes: A Large Scale Eye Gaze Estimation Dataset for Mixed Reality},
author = {Zhengyang Wu and Srivignesh Rajendran and Tarrence van As and Joelle Zimmermann and Vijay Badrinarayanan and Andrew Rabinovich},
journal= {arXiv preprint arXiv:2003.08806},
year = {2020}
}
备注
arXiv admin note: substantial text overlap with arXiv:1908.09060