凝视空白墙壁所能获知的信息
计算机视觉与模式识别
2021-08-31 v1
摘要
我们提出一种被动非视距方法，可通过观察未知房间中一面空白墙壁推断人数或人的活动。我们的技术分析了墙壁视频中间接光照的复杂不可感知变化，以揭示与场景隐藏部分中运动相关的信号。我们利用该信号对零、一或两名移动人员，或隐藏场景中人的活动进行分类。我们使用从 20 个不同场景收集的数据训练两个卷积神经网络，在未见测试环境与实时在线设置下两项任务均达到约 的准确率。与其他被动非视距方法不同，本技术不依赖已知遮挡物或可控光源，且无需重新校准即可泛化至未知房间。我们通过真实与合成数据分析了方法的泛化性与鲁棒性，并研究了场景参数对信号质量的影响。
引用
@article{arxiv.2108.13027,
title = {What You Can Learn by Staring at a Blank Wall},
author = {Prafull Sharma and Miika Aittala and Yoav Y. Schechner and Antonio Torralba and Gregory W. Wornell and William T. Freeman and Fredo Durand},
journal= {arXiv preprint arXiv:2108.13027},
year = {2021}
}