论主动推断与控制即推断之间的关系
人工智能
2020-06-30 v3 机器学习
摘要
主动推断（AIF）是脑科学中一个新兴的框架，认为生物智能体通过最小化模型证据的变分界来行动。控制即推断（CAI）是强化学习中的一个框架，将决策制定视为变分推断问题。尽管这些框架都通过变分推断的视角考量动作选择，它们之间的关系仍不清楚。在此，我们对二者进行形式化比较，并证明主要差异源于价值如何被纳入各自生成模型之中。在此比较背景下，我们强调了这些框架可以相互启发的几种方式。
引用
@article{arxiv.2006.12964,
title = {On the Relationship Between Active Inference and Control as Inference},
author = {Beren Millidge and Alexander Tschantz and Anil K Seth and Christopher L Buckley},
journal= {arXiv preprint arXiv:2006.12964},
year = {2020}
}
备注
final workshop version