中文

状态作为目标导向概念:一种状态表示学习的认识论方法

神经元与认知 2024-01-05 v2 信息论 math.IT

摘要

我们的目标从根本上塑造了我们体验世界的方式。例如,当我们饥饿时,我们倾向于根据环境中的物体是否可食用(或美味)来查看它们。或者,当我们感到寒冷时,我们可能会根据同一批物体产生热量的能力来查看它们。认知系统学习的计算理论(如强化学习)使用“状态表示”的概念来描述智能体如何决定其环境的哪些特征与行为相关,哪些可以忽略。然而,这些方法通常假设智能体已知“真实”状态表示,并且需要学习奖励函数。在这里,我们提出了一种替代方法,其中状态表示不被假设为真实的,甚至不被预先定义,而是通过智能体与其环境的交互从智能体的目标中产生。我们通过推断在气味引导的选择任务中驱动大鼠行为的目标来说明这种新颖的视角,并讨论其对从第一性原理出发发展目标导向状态表示学习与行为的信息论解释的意义。

关键词

引用

@article{arxiv.2312.02367,
  title  = {States as goal-directed concepts: an epistemic approach to state-representation learning},
  author = {Nadav Amir and Yael Niv and Angela Langdon},
  journal= {arXiv preprint arXiv:2312.02367},
  year   = {2024}
}