FLAME:基于面部关键点热图激活的多模态视线估计
计算机视觉与模式识别
2022-12-09 v3 人工智能
摘要
3D视线估计旨在预测人在三维空间中的视线方向。由于受试者之间的解剖差异,与人物无关的模型缺乏精度,而人物特定的标定技术对可扩展性施加了严格限制。为克服这些问题,我们提出一种新技术——面部关键点热图激活多模态视线估计(FLAME),通过利用眼部关键点热图结合眼部解剖信息,在无任何人物特定标定的情况下获得精确视线估计。我们的评估表明,在基准数据集ColumbiaGaze和EYEDIAP上取得了约10%提升的竞争性性能。我们还进行了消融实验以验证我们的方法。
引用
@article{arxiv.2110.04828,
title = {FLAME: Facial Landmark Heatmap Activated Multimodal Gaze Estimation},
author = {Neelabh Sinha and Michal Balazia and Francois Bremond},
journal= {arXiv preprint arXiv:2110.04828},
year = {2022}
}
备注
Preprint. Final paper accepted at the 17th IEEE International Conference on Advanced Video and Signal-based Surveillance (AVSS), virtual, November 2021. 8 pages