每张桌面上的光舞台
计算机视觉与模式识别
2021-11-12 v2 图形学
摘要
每次你坐在电视或显示器前，你的脸都会被随时间变化的灯光图案主动照亮。本文提出利用这种随时间变化的照明，将你的脸以任何新的照明条件进行合成重打光。在此过程中，我们受到 Debevec 等人光舞台工作的启发，他们首次展示了在受控照明环境中捕捉的人进行重打光的能力。现有光舞台需要昂贵的、房间尺度的球形捕捉龙门架，且世界上仅存在于少数实验室中，而我们展示了如何从普通电视或桌面显示器获取有用数据。我们不对用户施加不舒服的快速闪烁灯光图案，而是对用户观看 YouTube 视频或其他标准内容时的图像进行操作。我们在给定用户的图像加显示器图案上训练深度网络，并学习预测该用户在任意目标照明（显示器图案）下的图像。实验评估表明我们的方法产生逼真的重打光结果。视频结果可在 http://grail.cs.washington.edu/projects/Light_Stage_on_Every_Desk/ 获取。
引用
@article{arxiv.2105.08051,
title = {A Light Stage on Every Desk},
author = {Soumyadip Sengupta and Brian Curless and Ira Kemelmacher-Shlizerman and Steve Seitz},
journal= {arXiv preprint arXiv:2105.08051},
year = {2021}
}
备注
Updated citations from v1