中文

HORIZON:高分辨率语义可控全景合成

计算机视觉与模式识别 2024-01-30 v2

摘要

全景合成致力于打造引人入胜的360度视觉景观,将用户沉浸于虚拟世界的核心。然而,当代全景合成技术在语义引导内容生成过程方面面临挑战。尽管视觉合成的最新突破已释放了2D平面图像中语义控制的潜力,但这些方法直接应用于全景合成会产生扭曲内容。在本研究中,我们提出了一种生成高分辨率全景的创新框架,通过精细的球面建模巧妙解决球面畸变与边缘不连续问题。我们的开创性方法赋予用户语义控制能力,利用图像与文本输入,同时借助并行解码简化高分辨率全景的生成。我们在多样化的室内与室外数据集上严格评估了我们的方法,证实了其在定量与定性性能指标上均优于近期相关工作。我们的研究将全景合成的可控性、效率与保真度提升至新高度。

关键词

引用

@article{arxiv.2210.04522,
  title  = {HORIZON: High-Resolution Semantically Controlled Panorama Synthesis},
  author = {Kun Yan and Lei Ji and Chenfei Wu and Jian Liang and Ming Zhou and Nan Duan and Shuai Ma},
  journal= {arXiv preprint arXiv:2210.04522},
  year   = {2024}
}

备注

AAAI 2024 main conference