EfficientPhys:实现简洁、快速且准确的基于摄像头的生命体征测量
计算机视觉与模式识别
2022-12-20 v3 人工智能
人机交互
摘要
基于摄像头的生理测量是一个不断发展的领域,神经模型提供了最先进的性能。先前研究探索了多种“端到端”模型;然而这些方法仍需要若干预处理步骤。这些额外操作往往实现起来并非易事,使得复现与部署困难,甚至其计算开销可能高于“核心”网络本身。本文提出两种新颖高效的基于摄像头的生理测量神经模型 EfficientPhys,消除了对人脸检测、分割、归一化、色彩空间变换或任何其他预处理步骤的需求。以原始视频帧为输入,我们的模型在三个公开数据集上取得了强劲性能。我们表明无论使用 transformer 还是卷积骨干网络均如此。我们进一步评估了所提网络的延迟,并显示我们最轻量的网络还实现了 33% 的效率提升。
引用
@article{arxiv.2110.04447,
title = {EfficientPhys: Enabling Simple, Fast and Accurate Camera-Based Vitals Measurement},
author = {Xin Liu and Brian L. Hill and Ziheng Jiang and Shwetak Patel and Daniel McDuff},
journal= {arXiv preprint arXiv:2110.04447},
year = {2022}
}