生成对抗式前视图到鸟瞰图合成
计算机视觉与模式识别
2019-04-03 v3
摘要
环境感知是一项具有重要实用价值的任务，而鸟瞰图是创建周围环境全景的重要组成部分。由于前视图与鸟瞰图之间存在巨大差异和严重形变，从单一前视图生成鸟瞰图图像具有挑战性。为解决这个问题，我们提出了 BridgeGAN，即一种用于鸟瞰图合成的新颖生成模型。首先，引入中间视图（即单应视图）来弥合巨大差异。接下来，基于任务中的三个视图（前视图、单应视图和鸟瞰图），提出一种基于多 GAN 的模型来学习具有挑战性的跨视图转换。在合成数据集上进行的广泛实验表明，我们模型生成的图像远优于现有方法生成的图像，具有更一致的全局外观和更清晰的细节。消融研究与讨论显示了其在某些挑战性情况下的可靠性和鲁棒性。
引用
@article{arxiv.1808.00327,
title = {Generative Adversarial Frontal View to Bird View Synthesis},
author = {Xinge Zhu and Zhichao Yin and Jianping Shi and Hongsheng Li and Dahua Lin},
journal= {arXiv preprint arXiv:1808.00327},
year = {2019}
}
备注
Accepted to 3DV 2018; Codes are available at https://github.com/WERush/BridgeGAN