心理语言学遇见持续学习:在视觉问答中度量灾难性遗忘
计算与语言
2019-06-12 v1
摘要
我们在视觉问答(VQA)的神经多模态方法背景下研究灾难性遗忘问题。受心理语言学证据的启发,我们设计了一组语言信息驱动的 VQA 任务,其区别在于所涉及的提问类型(Wh-疑问句与是非疑问句)。我们测试了任务难度对持续学习的影响,以及儿童习得提问类型的顺序是否有助于计算模型。我们的结果表明严重的遗忘现象存在,且任务难度与顺序均有影响。两种已知的当前持续学习方法仅在一定程度上缓解了该问题。
引用
@article{arxiv.1906.04229,
title = {Psycholinguistics meets Continual Learning: Measuring Catastrophic Forgetting in Visual Question Answering},
author = {Claudio Greco and Barbara Plank and Raquel Fernández and Raffaella Bernardi},
journal= {arXiv preprint arXiv:1906.04229},
year = {2019}
}