神经网络的合并
机器学习
2022-08-23 v2
摘要
我们提出了一种简单的方案,用于将两个以不同初始种子训练得到的神经网络合并为一个与原始网络规模相同的网络。我们通过从每个输入网络中仔细选取通道来实现这一点。我们的流程可用作尝试多种初始种子以避免不幸种子后的收尾步骤。我们还表明,训练两个网络并将其合并比长时间训练单个网络具有更好的性能。可用性:https://github.com/fmfi-compbio/neural-network-merging
引用
@article{arxiv.2204.09973,
title = {Merging of neural networks},
author = {Martin Pašen and Vladimír Boža},
journal= {arXiv preprint arXiv:2204.09973},
year = {2022}
}