CLERA：一种用于自然场景下联合认知负荷与眼区分析的统一模型
人机交互
2023-06-28 v1 计算机视觉与模式识别
摘要
对非侵入式、实时的眼区动态进行分析，使我们能够在真实世界任务执行过程中监测人类的视觉注意力分配并估计其心理状态，这有可能惠及广泛的人机交互（HCI）应用。尽管商用眼动追踪设备已被频繁使用，但这些设备难以定制，对探索更高效、端到端的眼动动态模型造成了不必要的限制。在本工作中，我们提出 CLERA，一种用于认知负荷与眼区分析的统一模型，它在联合学习框架中实现精确的关键点检测与时空跟踪。我们的方法展现出显著的效率，并在认知负荷估计、眼部标志点检测与眨眼估计等任务上优于先前工作。我们还引入了一个包含 3 万张人脸的大规模数据集，带有瞳孔、睁眼度与标志点的联合标注，旨在支持未来关于人因与眼相关分析的 HCI 研究。
引用
@article{arxiv.2306.15073,
title = {CLERA: A Unified Model for Joint Cognitive Load and Eye Region Analysis in the Wild},
author = {Li Ding and Jack Terwilliger and Aishni Parab and Meng Wang and Lex Fridman and Bruce Mehler and Bryan Reimer},
journal= {arXiv preprint arXiv:2306.15073},
year = {2023}
}
备注
ACM Transactions on Computer-Human Interaction