中文

GPT4GEO:语言模型如何认知世界地理

计算与语言 2023-06-02 v1 人工智能 机器学习

摘要

大型语言模型(LLMs)在涉及问答以及连贯文本与代码生成的广泛任务中展现出卓越能力。全面理解 LLMs 的优势与不足,对安全性、下游应用及性能提升均有益处。在本工作中,我们考察了 GPT-4 获取事实性地理知识并能够运用该知识进行解释性推理的程度,这对于涉及地理数据的应用(如地理空间分析、供应链管理和灾害响应)尤为重要。为此,我们设计并实施了一系列多样化实验,从位置、距离和高程估计等事实性任务,到生成国家轮廓与旅行网络、约束下路径寻找和供应链分析等更复杂问题。我们广泛刻画了 GPT-4(无插件或互联网访问)对世界的认知,既突出了潜在令人惊讶的能力,也揭示了其局限性。

关键词

引用

@article{arxiv.2306.00020,
  title  = {GPT4GEO: How a Language Model Sees the World's Geography},
  author = {Jonathan Roberts and Timo Lüddecke and Sowmen Das and Kai Han and Samuel Albanie},
  journal= {arXiv preprint arXiv:2306.00020},
  year   = {2023}
}