MPIB：一种基于 MPI 的用于真实部分遮挡效果的散景渲染框架
计算机视觉与模式识别
2022-07-19 v1
摘要
部分遮挡效应是指靠近相机的模糊物体呈半透明状，从而导致被遮挡背景的部分显现。然而，由于全对焦图像中缺失被遮挡区域的信息，现有散景渲染方法难以模拟真实的部分遮挡效应。受可学习的 3D 场景表示——多平面图像（Multiplane Image, MPI）的启发，我们试图通过引入一种新颖的基于 MPI 的高分辨率散景渲染框架（称为 MPIB）来解决部分遮挡问题。为此，我们首先分析了如何将 MPI 表示应用于散景渲染。基于该分析，我们提出了一个 MPI 表示模块与背景修复模块相结合，以实现高分辨率场景表示。该表示随后可根据控制参数复用于渲染各种散景效果。为训练和测试我们的模型，我们还设计了一个基于光线追踪的散景生成器用于数据生成。在合成图像与真实图像上的大量实验验证了该框架的有效性与灵活性。
引用
@article{arxiv.2207.08403,
title = {MPIB: An MPI-Based Bokeh Rendering Framework for Realistic Partial Occlusion Effects},
author = {Juewen Peng and Jianming Zhang and Xianrui Luo and Hao Lu and Ke Xian and Zhiguo Cao},
journal= {arXiv preprint arXiv:2207.08403},
year = {2022}
}
备注
Accepted by ECCV 2022; Project: https://juewenpeng.github.io/MPIB/