SunStage：利用太阳作为光舞台进行人像重建与重光照
计算机视觉与模式识别
2023-03-28 v2
摘要
光舞台使用一系列标定好的相机和灯光来捕捉主体在不同光照和视角下的面部外观。这些捕捉到的信息对于面部重建和重光照至关重要。遗憾的是，光舞台通常难以获取：它们价格昂贵，且需要大量的专业技术知识来搭建和操作。本文提出SunStage：一种光舞台的轻量级替代方案，仅使用智能手机摄像头和太阳即可捕捉可比的数据。我们的方法仅要求用户在外景拍摄一段自拍视频，原地旋转，并利用太阳与面部之间变化的角度作为指导，联合重建面部几何、反射率、相机姿态和光照参数。尽管处于非受控的未标定环境，我们的方法仍能重建出精细的面部外观和几何，从而实现引人注目的效果，如重光照、新视角合成和反射率编辑。结果和交互演示见https://sunstage.cs.washington.edu/。
引用
@article{arxiv.2204.03648,
title = {SunStage: Portrait Reconstruction and Relighting using the Sun as a Light Stage},
author = {Yifan Wang and Aleksander Holynski and Xiuming Zhang and Xuaner Zhang},
journal= {arXiv preprint arXiv:2204.03648},
year = {2023}
}
备注
CVPR 2023. Project page: https://sunstage.cs.washington.edu/