基于像素高度图的可控阴影生成
计算机视觉与模式识别
2022-07-18 v2 图形学
摘要
阴影对于真实感图像合成至关重要。基于物理的阴影渲染方法需要三维几何，而这些几何并非总是可用。基于深度学习的阴影合成方法在不显式建模阴影几何的情况下，学习从光照信息到物体阴影的映射。然而，它们缺乏可控性且容易出现视觉伪影。我们引入像素高度（pixel height），一种编码物体、地面与相机位姿之间关联的新颖几何表示。像素高度可由三维几何计算得到，在二维图像上手动标注，也可通过监督方法从单视图RGB图像中预测。它可用于基于投影几何在二维图像中计算硬阴影，从而精确控制阴影的方向与形状。此外，我们提出一种数据驱动的软阴影生成器，根据软度输入参数将软度施加于硬阴影。定性与定量评估表明，所提出的像素高度在允许可控性的同时显著提升了阴影生成的质量。
引用
@article{arxiv.2207.05385,
title = {Controllable Shadow Generation Using Pixel Height Maps},
author = {Yichen Sheng and Yifan Liu and Jianming Zhang and Wei Yin and A. Cengiz Oztireli and He Zhang and Zhe Lin and Eli Shechtman and Bedrich Benes},
journal= {arXiv preprint arXiv:2207.05385},
year = {2022}
}
备注
15 pages, 11 figures