MONITRS：基于遥感自然灾害事件的多模态观测

Shreelekha Revankar; Utkarsh Mall; Cheng Perng Phoo; Kavita Bala; Bharath Hariharan

MONITRS：基于遥感自然灾害事件的多模态观测

计算机视觉与模式识别 2025-07-23 v1

作者: Shreelekha Revankar , Utkarsh Mall , Cheng Perng Phoo , Kavita Bala , Bharath Hariharan

摘要

自然灾害每年对社区和基础设施造成毁灭性破坏。在灾害发生期间和之后，难以进入受灾区域，阻碍了有效的灾害响应。遥感技术使我们能够以远程方式监测自然灾害。近期，计算机视觉和深度学习方面取得了进展，有助于自动化卫星图像分析，然而它们仍受限于以下问题：仅聚焦于特定灾害类型、依赖人工专家解读，以及缺乏具备足够时间粒度或自然语言注释的数据集来追踪灾害进展。我们提出了 MONITRS，一个包含超过 10,000 起 FEMA 灾害事件的新型多模态数据集，附带时间序列卫星图像和来自新闻文章的自然语言注释，以及地理标记位置和问答对。我们证明，在我们的数据集上对现有 MLLM 进行微调，可在灾害监测任务中带来显著的性能提升，为机器学习辅助的灾害响应系统建立了新的基准。代码可在以下地址找到：https://github.com/ShreelekhaR/MONITRS

关键词

多模态数据集遥感灾害监测计算机视觉卫星图像自然语言注释

引用

@article{arxiv.2507.16228,
  title  = {MONITRS: Multimodal Observations of Natural Incidents Through Remote Sensing},
  author = {Shreelekha Revankar and Utkarsh Mall and Cheng Perng Phoo and Kavita Bala and Bharath Hariharan},
  journal= {arXiv preprint arXiv:2507.16228},
  year   = {2025}
}

备注

17 pages, 9 figures, 4 tables

MONITRS：基于遥感自然灾害事件的多模态观测

摘要

关键词

引用

备注

相关论文