基于多平面图像的单视图视图合成
计算机视觉与模式识别
2020-04-24 v1 图形学
摘要
视图合成中近期一系列工作使用深度学习，在给定两个或更多已知视点输入图像的情况下生成多平面图像（一种以相机为中心的分层 3D 表示）。我们将该表示应用于单视图视图合成，这是一个更具挑战性但潜在应用广泛得多的问题。我们的方法学习直接从单幅图像输入预测多平面图像，并引入尺度不变视图合成作为监督，使我们能够在在线视频上训练。我们展示了该方法适用于多个不同数据集，它还额外生成合理的深度图，并学会在背景层中填充前景物体边缘背后的内容。项目页面位于 https://single-view-mpi.github.io/。
引用
@article{arxiv.2004.11364,
title = {Single-View View Synthesis with Multiplane Images},
author = {Richard Tucker and Noah Snavely},
journal= {arXiv preprint arXiv:2004.11364},
year = {2020}
}