中文

NeoVerse:基于野外单目视频增强的4D世界模型

计算机视觉与模式识别 2026-03-27 v2

摘要

本文提出NeoVerse,一个能够实现4D重建、新轨迹视频生成以及丰富下游应用的通用4D世界模型。我们首先识别了当前4D世界建模方法在可扩展性上的常见局限,这些局限要么源于高成本且专业化的多视角4D数据,要么源于繁琐的训练预处理。相反,NeoVerse基于一种使其完整管道可扩展至多样野外单目视频的核心理念构建。具体而言,NeoVerse特点包括无姿态的前馈4D重建、在线单目退化模式仿真以及其他良好对齐的技术。这些设计使NeoVerse具备 versatility 和对各种领域的 generalization 能力。同时,NeoVerse在标准重建和生成基准测试中实现了最好的性能。我们的项目页面已公开可访问。

关键词

引用

@article{arxiv.2601.00393,
  title  = {NeoVerse: Enhancing 4D World Model with in-the-wild Monocular Videos},
  author = {Yuxue Yang and Lue Fan and Ziqi Shi and Junran Peng and Feng Wang and Zhaoxiang Zhang},
  journal= {arXiv preprint arXiv:2601.00393},
  year   = {2026}
}

备注

CVPR 2026; Project Page: https://neoverse-4d.github.io