卡方放大:识别隐藏枢纽
机器学习
2016-11-17 v2 数据结构与算法
机器学习
摘要
我们考虑如下通用隐藏枢纽模型:一个随机矩阵,具有个特殊行(枢纽)的子集:不在中的行元素由概率分布生成;对于中的每一行,其某些个元素由生成(),其余元素由生成。问题是高效识别高度数枢纽。该模型包含并显著推广了植入高斯子矩阵模型,其中特殊元素全在一个子矩阵中。存在两个著名壁垒:若,仅行和就足以在通用模型中找到。对于子矩阵问题,通过谱方法或组合方法可改进因子至。在(各以概率)且的变体中,两个壁垒均未被打破。我们给出一种多项式时间算法,当时,对某个,在下以高概率识别所有隐藏枢纽。该算法推广到植入元素可能具有不同方差(每个至少与一样大)的情形。我们还展示了近乎匹配的下界:对于,不存在多项式时间统计查询算法来区分元素全来自的矩阵与具有隐藏枢纽的矩阵(任意)。下界与算法均关联到两个分布的卡方距离是否发散。在临界值处,我们证明通用隐藏枢纽问题可在下求解,改进了朴素的基于行和的方法。
引用
@article{arxiv.1608.03643,
title = {Chi-squared Amplification: Identifying Hidden Hubs},
author = {Ravi Kannan and Santosh Vempala},
journal= {arXiv preprint arXiv:1608.03643},
year = {2016}
}