中文

q-神经元:基于随机 Jackson 导数算子的神经元激活

神经与进化计算 2021-04-29 v2 机器学习 机器学习

摘要

我们提出一种新型通用随机神经元,称为 qq-神经元,其考虑基于带随机参数 qq 的 Jackson qq-导数的激活函数。我们用 qq-神经元对神经网络架构的推广被证明既可扩展又非常易于实现。我们通过实验证明,在训练与测试损失函数上,相较于最先进的的标准激活函数,性能得到了一致的提升。

关键词

引用

@article{arxiv.1806.00149,
  title  = {q-Neurons: Neuron Activations based on Stochastic Jackson's Derivative Operators},
  author = {Frank Nielsen and Ke Sun},
  journal= {arXiv preprint arXiv:1806.00149},
  year   = {2021}
}

备注

12 pages, 5 figures, 1 table