大型语言模型能否对区域连接计算进行推理？
计算与语言
2024-12-02 v1
摘要
定性空间推理是知识表示与推理领域的一个已被广泛探索的领域，应用范围涵盖地理信息系统、机器人和计算机视觉等多个领域。最近，人们对大型语言模型(LLM)的推理能力作出了许多声称。本文研究了一套代表性 LLM 在纯拓扑区域连接计算(RCC-8)上执行经典定性空间推理任务的能力。我们进行了三对实验(构成表的重建、对齐人类构成偏好、概念邻域重建)，使用最先进的 LLM；在每对实验中，一项使用原式关系，另一项使用匿名关系(以测试 LLM 依赖于在训练期间获得的关系名称知识的程度)。所有实例重复 30 次以衡量 LLM 的随机性。
引用
@article{arxiv.2411.19589,
title = {Can Large Language Models Reason about the Region Connection Calculus?},
author = {Anthony G Cohn and Robert E Blackwell},
journal= {arXiv preprint arXiv:2411.19589},
year = {2024}
}
备注
13 pages. arXiv admin note: text overlap with arXiv:2309.15577