LightPainter:基于自由手绘涂鸦的交互式人像重打光
计算机视觉与模式识别
2023-03-24 v1 图形学
摘要
近期的人像重打光方法在给定所需光照表示(如环境贴图)时已能实现逼真的人像光照效果。然而,这些方法在用户交互上不够直观,且缺乏精确的光照控制。我们提出 LightPainter,一种基于涂鸦的重打光系统,允许用户轻松交互式地操控人像光照效果。这通过两个条件神经网络实现:一个去光照模块(可选以肤色为条件恢复几何与反照率)和一个基于涂鸦的重打光模块。为训练重打光模块,我们提出一种新颖的涂鸦模拟流程以模仿真实用户涂鸦,使我们的流水线无需任何人注即可训练。我们通过定量与定性实验展示了高质量且灵活的人像光照编辑能力。与商业光照编辑工具的用户研究比较也显示出用户对我们方法的一致偏好。
引用
@article{arxiv.2303.12950,
title = {LightPainter: Interactive Portrait Relighting with Freehand Scribble},
author = {Yiqun Mei and He Zhang and Xuaner Zhang and Jianming Zhang and Zhixin Shu and Yilin Wang and Zijun Wei and Shi Yan and HyunJoon Jung and Vishal M. Patel},
journal= {arXiv preprint arXiv:2303.12950},
year = {2023}
}
备注
CVPR2023