“停止用糖代替盐！”：迈向直观的人-智能体教学

人类能够从少量示例中快速学习新概念。用人工智能（AI）系统复制这种能力已被证明极具挑战性。当涉及到学习主观任务（存在明显数据稀缺的情况）时，这种能力需要被重新创造。在这项工作中，我们提出了一种直观的人-智能体教学架构，其中人类可以通过提供演示（即示例）来教导智能体如何执行任务。为了实现直观的交互，我们认为智能体应该能够从少数单个示例中进行增量学习。为了实现这一点，我们的目标是利用领域知识拓宽智能体的任务理解。然后，使用一种学习方法使智能体能够从有限数量的示例中高效学习。最后，优化人类如何选择最具代表性且最少冗余的示例提供给智能体。我们将提出的方法应用于食材替代的主观任务，其中智能体需要根据人类示例学习如何在食谱中替代食材。我们使用 Recipe1MSubs 数据集复现人类输入。在我们的实验中，与包含 5 万个示例的完整训练集相比，智能体在仅提供 100 个示例后就达到了其一半的任务性能。我们表明，通过以策略性顺序提供示例并结合利用外部符号知识的学习方法，智能体可以更高效地进行泛化。