PCFGaze:用于基于表观的凝视估计的物理一致特征
计算机视觉与模式识别
2023-09-06 v1
摘要
尽管近期基于深度学习的凝视估计方法已取得诸多进展,我们仍对凝视特征如何与凝视物理相关联知之甚少。本文中,我们尝试通过分析凝视特征流形来回答此问题。我们的分析揭示了一个见解:凝视特征间的测地距离与样本间凝视差异相一致。依据该发现,我们以解析方式构造物理一致特征(PCF),将凝视特征与凝视的物理定义相连。我们进一步提出 PCFGaze 框架,在 PCF 引导下直接优化凝视特征空间。实验结果表明,所提框架缓解了过拟合问题,并在无额外训练数据的情况下显著提升了跨域凝视估计精度。关于凝视特征的见解有望惠及其他具有物理意义的回归任务。
引用
@article{arxiv.2309.02165,
title = {PCFGaze: Physics-Consistent Feature for Appearance-based Gaze Estimation},
author = {Yiwei Bao and Feng Lu},
journal= {arXiv preprint arXiv:2309.02165},
year = {2023}
}