中文

基于决策树集成的非参数依赖性检验

统计方法学 2020-07-27 v1 机器学习 机器学习

摘要

本文提出了一种稳健的、用于衡量两个随机变量之间统计依赖性(或相关性)的非参数度量。所提出的系数是一种类似置换的统计量,它量化了观测样本 Sn:{(Xi,Yi),i=1n}S_n : \{(X_i , Y_i), i = 1 \ldots n\} 与置换样本 S^n:{(Xi,Yj),i,j=1n}\hat{S}_n : \{(X_i , Y_j), i, j = 1 \ldots n\}(其中两个变量独立)的可区分程度。可区分程度是通过训练一个决策树集成来区分这两个样本(无需显式生成置换样本),并利用其对可互换的留出样本的预测来确定的。所提出的系数计算效率高、可解释、对单调变换具有不变性,并且在独立性假设下具有良好近似的分布。实证结果表明,所提出的方法在从噪声数据中检测复杂关系方面具有很高的功效。

关键词

引用

@article{arxiv.2007.12325,
  title  = {A Nonparametric Test of Dependence Based on Ensemble of Decision Trees},
  author = {Rami Mahdi},
  journal= {arXiv preprint arXiv:2007.12325},
  year   = {2020}
}

备注

35 pages, 6 figures, 1 table with 15 small figures