NVS-Solver：视频扩散模型作为零样本新视角合成器

通过利用预训练大型视频扩散模型的强大生成能力，我们提出了NVS-Solver，一种无需训练的新视角合成（NVS）范式。NVS-Solver根据给定视角自适应地调制扩散采样过程，从而能够从静态场景的单视图或多视图或动态场景的单目视频中创造非凡的视觉体验。具体而言，基于我们的理论建模，我们利用以扭曲输入视图表示的给定场景先验迭代调制得分函数，以控制视频扩散过程。此外，通过理论探索估计误差的边界，我们根据视角姿态和扩散步数实现了自适应调制。在静态和动态场景上的广泛评估证实，我们的NVS-Solver在定量和定性上均显著优于最先进的方法。源代码见 https://github.com/ZHU-Zhiyu/NVS_Solver。