中文

从具体到抽象:一种多模态生成方法用于抽象概念学习

计算与语言 2024-10-04 v1 人工智能

摘要

理解和操作具体与抽象概念是人类智能的基本能力。然而,这对人工智能体来说仍然具有挑战性。本文引入了一种多模态生成方法,用于高阶抽象概念学习,通过整合来自具体概念的视觉与类别语言信息。我们的模型最初对次级具体概念进行 grounding,然后将其组合以形成基本层次的概念,最终通过对基本层次概念的 grounding 抽象到次级层次的概念。我们通过语言到视觉和视觉到语言测试评估了模型的语言学习能力,涉及高阶抽象概念。实验结果表明,该模型在语言理解和语言命名任务中表现出色。

关键词

引用

@article{arxiv.2410.02365,
  title  = {From Concrete to Abstract: A Multimodal Generative Approach to Abstract Concept Learning},
  author = {Haodong Xie and Rahul Singh Maharjan and Federico Tavella and Angelo Cangelosi},
  journal= {arXiv preprint arXiv:2410.02365},
  year   = {2024}
}