Instruct-NeRF2NeRF:基于指令编辑3D场景
计算机视觉与模式识别
2023-06-02 v2 图形学
摘要
我们提出一种利用文本指令编辑NeRF场景的方法。给定场景的NeRF及用于重建该场景的图像集合,我们的方法使用图像条件扩散模型(InstructPix2Pix)迭代编辑输入图像,同时优化底层场景,从而得到遵循编辑指令的优化后3D场景。我们证明所提方法能够编辑大规模真实世界场景,并且相比先前工作能够实现更真实、更具针对性的编辑。
引用
@article{arxiv.2303.12789,
title = {Instruct-NeRF2NeRF: Editing 3D Scenes with Instructions},
author = {Ayaan Haque and Matthew Tancik and Alexei A. Efros and Aleksander Holynski and Angjoo Kanazawa},
journal= {arXiv preprint arXiv:2303.12789},
year = {2023}
}
备注
Project website: https://instruct-nerf2nerf.github.io; v1. Revisions to related work and discussion