PhysMamba：基于状态空间二义性模型的遥控生理测量
计算机视觉与模式识别
2025-01-17 v3
摘要
遥控光学动力学（rPPG）通过面部视频实现非接触式生理信号提取，已在心理状态分析、医疗救助和防欺诈等方面得到应用。然而，由于运动伪影、光照变化和噪声等挑战，其实际应用受限。为此，我们提出了PhysMamba，一种基于Synergistic State Space Duality（SSSD）的双路径时间频率交互模型，这是首次将状态空间模型与注意力机制集成到双分支框架中。结合多尺度查询（MQ）机制，PhysMamba实现了高效的信息交换和增强的特征表示，确保在噪声和动态条件下的鲁健性。在PURE、UBFC-rPPG和MMPD数据集上的实验表明，PhysMamba超过了当前最先进的方法，展现出卓越的准确性和泛化能力。本工作为实际应用奠定了坚实基础，包括实时远程患者护理。
引用
@article{arxiv.2408.01077,
title = {PhysMamba: State Space Duality Model for Remote Physiological Measurement},
author = {Zhixin Yan and Yan Zhong and Hongbin Xu and Wenjun Zhang and Shangru Yi and Lin Shu and Wenxiong Kang},
journal= {arXiv preprint arXiv:2408.01077},
year = {2025}
}