中文

Sora 生成具有惊人几何一致性的视频

计算机视觉与模式识别 2024-02-28 v1

摘要

最近开发的 Sora 模型 [1] 在视频生成方面展现了卓越的能力,引发了关于其模拟现实世界现象能力的激烈讨论。尽管其日益普及,但缺乏既定的指标来定量评估其对现实世界物理规律的保真度。在本文中,我们引入了一种新的基准,根据生成视频对现实世界物理原理的遵循程度来评估其质量。我们采用一种将生成视频转换为 3D 模型的方法,其前提是 3D 重建的准确性高度依赖于视频质量。从 3D 重建的角度出发,我们利用构建的 3D 模型所满足的几何约束的保真度作为代理,以衡量生成视频符合现实世界物理规则的程度。项目页面:https://sora-geometrical-consistency.github.io/

关键词

引用

@article{arxiv.2402.17403,
  title  = {Sora Generates Videos with Stunning Geometrical Consistency},
  author = {Xuanyi Li and Daquan Zhou and Chenxu Zhang and Shaodong Wei and Qibin Hou and Ming-Ming Cheng},
  journal= {arXiv preprint arXiv:2402.17403},
  year   = {2024}
}

备注

5 pages, 3 figures