使用普通智能手机的随行反射变换成像
计算机视觉与模式识别
2023-03-09 v1 图形学
摘要
反射变换成像（RTI）是一种流行的技术，通过在不同光照条件下捕获物体来恢复逐像素反射率信息。这可用于后续揭示表面细节并交互式地重新打光对象。然而，此类过程通常需要专用硬件装置以从多个位置恢复光方向，使得在实验室外进行时过程繁琐。我们提出了一种新颖的 RTI 方法，可通过用两部普通智能手机录制视频来实现。一部设备的闪光 LED 灯用于照亮对象，另一部捕获反射率。由于 LED 安装在相机镜头附近，我们可以通过自由移动照明设备同时观察对象周围的基准标记，为数千张图像推断光方向。为处理如此大量的数据，我们提出了一种神经重打光模型，该模型从通过主成分分析（PCA）压缩的极紧凑反射率分布数据中重建任意光方向下的物体外观。实验表明，所提技术可在现场轻松执行，得到的 RTI 模型能够优于涉及专用硬件装置的最先进方法。
引用
@article{arxiv.2210.09821,
title = {On-the-go Reflectance Transformation Imaging with Ordinary Smartphones},
author = {Mara Pistellato and Filippo Bergamasco},
journal= {arXiv preprint arXiv:2210.09821},
year = {2023}
}
备注
VISART VI - Workshop at the European Conference of Computer Vision (ECCV)