期望自由能从何而来？
人工智能
2020-09-30 v5
摘要
期望自由能（EFE）是主动推断理论中的一个核心量。它是所有主动推断智能体被要求通过行动去最小化的量，而其分解为外在价值项与内在价值项，是主动推断智能体所表现出的探索与利用之间平衡的关键。尽管其重要，该量的数学起源及其与变分自由能（VFE）的关系仍不清楚。在本文中，我们详细考察 EFE 的起源，并表明它并非简单的“未来的自由能”。我们提出一个泛函，认为它是 VFE 的自然推广，但却主动抑制探索行为，从而证明探索并不直接源于向未来的自由能最小化。随后我们发展了一个新的目标——期望未来的自由能（FEEF），它既具有 EFE 的认知成分，又拥有作为预测未来与期望未来之间散度的直观数学基础。
引用
@article{arxiv.2004.08128,
title = {Whence the Expected Free Energy?},
author = {Beren Millidge and Alexander Tschantz and Christopher L Buckley},
journal= {arXiv preprint arXiv:2004.08128},
year = {2020}
}
备注
24 pages, 0 figures. Reuploaded to correct typos in the original. Update 05-07-20 -- minor corrections. Update 28-09-20 -- Final version accepted by Neural Computation