Morpheus：基于真实物理实验评估视频生成模型物理推理的基准
计算机视觉与模式识别
2025-10-21 v2
摘要
近期的图像和视频生成技术为这些模型具备世界建模能力——即生成真实、物理上合理的视频——提供了希望。这一能力可能彻底改变机器人、自动驾驶和科学仿真等应用领域。然而，在将这些模型视为世界模型之前，我们必须问：它们是否遵循物理守恒定律？为此，我们引入 Morpheus，一个用于评估视频生成模型物理推理的基准测试。该基准包含80个真实世界视频，捕捉物理现象，依据守恒定律设计。由于人工生成内容缺乏真实答案，我们采用基于物理守恒定律的物理合理性指标来评估物理合理性，这些指标借鉴了物理信息神经网络和视觉语言基础模型的进展。我们的发现表明，尽管采用先进的提示策略和视频条件，当前模型仍难以编码物理原则，尽管能够生成视觉上令人愉悦的视频。所有数据、排行榜和代码均在项目页面开源。
引用
@article{arxiv.2504.02918,
title = {Morpheus: Benchmarking Physical Reasoning of Video Generative Models with Real Physical Experiments},
author = {Chenyu Zhang and Daniil Cherniavskii and Antonios Tragoudaras and Antonios Vozikis and Thijmen Nijdam and Derck W. E. Prinzhorn and Mark Bodracska and Nicu Sebe and Andrii Zadaianchuk and Efstratios Gavves},
journal= {arXiv preprint arXiv:2504.02918},
year = {2025}
}