中文

基于事件驱动眼部分割的实时视线追踪

人机交互 2022-01-20 v1

摘要

视线追踪日益成为增强与虚拟现实中的关键组件。现代视线追踪算法较为繁重;尽管近眼相机可舒适地以实时速率(>30 Hz)工作,它们在移动处理器上最多以5 Hz运行。本文提出一种实时眼动追踪算法,在移动处理器上平均以30 Hz运行,达到0.1°–0.5°视线精度,同时仅需30K参数,比最先进眼动追踪算法小一至两个数量级。我们算法的关键在于自动ROI模式,其持续预测近眼图像的感兴趣区域(ROIs)并仅审慎处理ROI以进行视线估计。为此,我们通过模拟事件相机引入一种新颖轻量的ROI预测算法。我们讨论事件的软件模拟如何在不需特殊硬件的情况下实现准确ROI预测。本文代码见https://github.com/horizon-research/edgaze。

关键词

引用

@article{arxiv.2201.07367,
  title  = {Real-Time Gaze Tracking with Event-Driven Eye Segmentation},
  author = {Yu Feng and Nathan Goulding-Hotta and Asif Khan and Hans Reyserhove and Yuhao Zhu},
  journal= {arXiv preprint arXiv:2201.07367},
  year   = {2022}
}