FacialMotionID:基于抽象面部运动表示识别混合现实头显用户
密码学与安全
2025-07-16 v1
摘要
混合现实头显中的面部运动捕获使实时头像动画成为可能,允许用户在虚拟交互期间传递非语言线索。然而,由于面部运动数据属于行为生物特征,其使用引发了新的隐私关注。随着混合现实系统变得更加沉浸式和普及,理解面部运动数据是否可能导致用户识别或推断敏感属性日益重要。为此,我们针对116名参与者进行了研究,他们使用三种类型的头盔进行三个会话,期间收集了面部、眼部和头部运动数据,用于执行言语和非言语任务。所用数据并非原始视频,而是用于动画数字化身的抽象表示。我们的分析表明,来自该数据的个体可达到最高98%的平衡准确率被识别,甚至可以跨设备类型识别,情感状态可达86%的准确率被推断。这些结果凸显了面部运动跟踪在混合现实环境中潜在的隐私风险。
引用
@article{arxiv.2507.11138,
title = {FacialMotionID: Identifying Users of Mixed Reality Headsets using Abstract Facial Motion Representations},
author = {Adriano Castro and Simon Hanisch and Matin Fallahi and Thorsten Strufe},
journal= {arXiv preprint arXiv:2507.11138},
year = {2025}
}