关于 WVA 结构问题的实证考察
机器学习
2022-08-16 v2
摘要
在本文中,我们旨在呈现针对神经网络中克服灾难性遗忘方法的若干问题的实证验证结果。首先,在引言中,我们将尝试为尚不熟悉该主题的读者详细描述灾难性遗忘问题及其克服方法。随后我们将讨论我们在先前论文中提出的 WVA 方法的本质与局限。进一步,我们将触及将 WVA 方法应用于梯度或权重优化步、在该方法中选取最优衰减函数,以及依据神经网络顺序训练任务数选取方法最优超参数的问题。
引用
@article{arxiv.2208.05791,
title = {Empirical investigations on WVA structural issues},
author = {Alexey Kutalev and Alisa Lapina},
journal= {arXiv preprint arXiv:2208.05791},
year = {2022}
}
备注
16 pages, 9 figures