中文

基于深度 ReQU 神经网络的非交叉分位数回归过程估计

机器学习 2022-07-22 v1 机器学习

摘要

我们提出一种惩罚非参数方法,利用整流二次单元(ReQU)激活的深度神经网络估计不可分模型中的分位数回归过程(QRP),并引入一种新的惩罚函数以强制分位数回归曲线不交叉。我们建立了所估计 QRP 的非渐近超额风险界,并在温和的光滑性与正则条件下推导了所估计 QRP 的均值积分平方误差。为建立这些非渐近风险与估计误差界,我们还发展了使用 ReQU 激活神经网络逼近 CsC^s 光滑函数(s>0s >0)及其导数的新误差界。这是关于 ReQU 网络的一项新的逼近结果,具有独立意义,并可能用于其他问题。我们的数值实验表明,所提方法在非参数分位数回归上可与两种现有方法(包括使用再生核与随机森林的方法)竞争或优于它们。

关键词

引用

@article{arxiv.2207.10442,
  title  = {Estimation of Non-Crossing Quantile Regression Process with Deep ReQU Neural Networks},
  author = {Guohao Shen and Yuling Jiao and Yuanyuan Lin and Joel L. Horowitz and Jian Huang},
  journal= {arXiv preprint arXiv:2207.10442},
  year   = {2022}
}

备注

44 pages, 10 figures, 6 tables