Omni-Weather:面向天气雷达理解与生成的统一多模态模型
计算机视觉与模式识别
2026-03-31 v3
摘要
天气建模需要准确的预测和机制化解释,但现有方法将这两个目标分离,使生成与理解各自为政。为此,我们提出Omni-Weather,首个统一天气生成与理解的多模态基础模型。Omni-Weather集成雷达编码器用于天气生成任务,随后通过共享自注意力机制进行统一处理。此外,我们构建了一个用于因果推理的 Chain-of-Thought 数据集,实现可解释输出并提升感知质量。大量实验表明,Omni-Weather在天气生成和理解任务上均实现了最先进的性能。我们的发现进一步表明,天气领域的生成和理解任务可以相互增强。Omni-Weather也展示了统一天气生成与理解的可行性与价值。
引用
@article{arxiv.2512.21643,
title = {Omni-Weather: A Unified Multimodal Model for Weather Radar Understanding and Generation},
author = {Zhiwang Zhou and Yuandong Pu and Xuming He and Yidi Liu and Yixin Chen and Junchao Gong and Xiang Zhuang and Wanghan Xu and Qinglong Cao and Shixiang Tang and Yihao Liu and Wenlong Zhang and Lei Bai},
journal= {arXiv preprint arXiv:2512.21643},
year = {2026}
}