关于奖励结构学习智能体的可能性:基于语言随机集的互信息
机器学习
2019-12-05 v4 人工智能
计算与语言
信息论
math.IT
机器学习
摘要
我们首次尝试阐明一种理论与经验方法,用于设计由自然语言环境提供给某结构学习智能体的奖励。为此,我们重访无监督短语结构语法归纳的信息论,以刻画建模为集值随机变量(构成语义结构的语言样本随机集)的模拟行为。我们的结果给出了经验证据:通过观测其构成成分间的互信息,可将模拟语义结构(开放信息抽取三元组)与随机构造的结构区分开。这表明了在不使用预训练结构分析器(预言执行体/专家)的情况下奖励结构学习智能体的可能性。
引用
@article{arxiv.1910.04023,
title = {On the Possibility of Rewarding Structure Learning Agents: Mutual Information on Linguistic Random Sets},
author = {Ignacio Arroyo-Fernández and Mauricio Carrasco-Ruíz and J. Anibal Arias-Aguilar},
journal= {arXiv preprint arXiv:1910.04023},
year = {2019}
}
备注
Paper accepted to the Workshop on Sets & Partitions (NeurIPS 2019, Vancouver, Canada)