q-神经元:基于随机 Jackson 导数算子的神经元激活
神经与进化计算
2021-04-29 v2 机器学习
机器学习
摘要
我们提出一种新型通用随机神经元,称为 -神经元,其考虑基于带随机参数 的 Jackson -导数的激活函数。我们用 -神经元对神经网络架构的推广被证明既可扩展又非常易于实现。我们通过实验证明,在训练与测试损失函数上,相较于最先进的的标准激活函数,性能得到了一致的提升。
引用
@article{arxiv.1806.00149,
title = {q-Neurons: Neuron Activations based on Stochastic Jackson's Derivative Operators},
author = {Frank Nielsen and Ke Sun},
journal= {arXiv preprint arXiv:1806.00149},
year = {2021}
}
备注
12 pages, 5 figures, 1 table