基于增强遥测光电容积率信号形态的生物识别认证

遥测光电容积率(rPPG)是从面部视频中测量心脏信号的非接触方法，提供了比从接触传感器获取的接触光电容积率(cPPG)更便捷的替代方案。最近的研究表明，每个个体都具有独特的cPPG信号形态，可用作生物识别标识符，这激发了我们利用从面部视频中提取的rPPG信号形态进行人身份验证的想法。由于面部外观与rPPG混合在面部视频中，我们首先对面部视频进行去识别以移除面部外观，同时保留rPPG信息，这既保护了面部隐私，又确保仅使用rPPG进行认证。将去识别后的视频输入rPPG模型以获取用于认证的rPPG信号形态。在第一个训练阶段，进行无监督rPPG训练以获得粗糙的rPPG信号。在第二个训练阶段，通过融合外部cPPG数据集实现rPPG-cPPG混合训练，以实现rPPG生物识别认证并增强rPPG信号形态。我们的方案仅需去识别的面部视频及对应受试者ID即可训练rPPG认证模型。实验结果表明，隐藏在面部视频中的rPPG信号形态可用于生物识别认证。代码已公开于https://github.com/zhaodongsun/rppg_biometrics。