用于多参数基于摄像头的生理感知的合成数据
计算机视觉与模式识别
2021-10-12 v1
摘要
合成数据是训练数据饥渴型深度学习算法的有力工具。然而迄今,基于摄像头的生理感知尚未充分利用这些技术。本工作中,我们利用高保真合成流水线生成具有真实血流与呼吸模式的面部视频。我们给出系统性实验,展示生理驱动的合成数据如何用于训练基于摄像头的多参数心肺感知。我们提供经验证据:心率与呼吸率测量精度随训练集中合成虚拟形象数量增加而提升。此外,使用深肤色类型虚拟形象训练比使用浅肤色类型虚拟形象训练带来更好的整体性能。最后,我们讨论合成技术在基于摄像头的生理感知领域的机遇与尚需克服的局限。
引用
@article{arxiv.2110.04902,
title = {Synthetic Data for Multi-Parameter Camera-Based Physiological Sensing},
author = {Daniel McDuff and Xin Liu and Javier Hernandez and Erroll Wood and Tadas Baltrusaitis},
journal= {arXiv preprint arXiv:2110.04902},
year = {2021}
}