Maxout 网络
机器学习
2013-09-23 v4 机器学习
摘要
我们考虑设计模型以利用一种最近引入的近似模型平均技术(称为 dropout)的问题。我们定义了一种称为 maxout 的简单新模型(之所以如此命名,是因为其输出是一组输入的最大值,并且它是 dropout 的自然伴侣),旨在既促进 dropout 的优化,又提高 dropout 快速近似模型平均技术的准确性。我们通过实证验证了该模型成功完成了这两项任务。我们使用 maxout 和 dropout 在四个基准数据集上展示了最先进的分类性能:MNIST、CIFAR-10、CIFAR-100 和 SVHN。
引用
@article{arxiv.1302.4389,
title = {Maxout Networks},
author = {Ian J. Goodfellow and David Warde-Farley and Mehdi Mirza and Aaron Courville and Yoshua Bengio},
journal= {arXiv preprint arXiv:1302.4389},
year = {2013}
}
备注
This is the version of the paper that appears in ICML 2013