中文

基于消息传递的子矩阵定位

机器学习 2015-11-02 v1 信息论 社会与信息网络 math.IT 概率论 统计理论 统计理论

摘要

主子矩阵定位问题涉及在受加性标准高斯噪声影响的大型n×nn\times n对称矩阵中恢复具有升高均值μ\muK×KK\times K主子矩阵。该问题作为社区检测的雏形示例,其中社区对应于子矩阵的支持集。本文的主要结果是,在Ω(n)Ko(n)\Omega(\sqrt{n}) \leq K \leq o(n)机制下,如果λ=μ2K2/n\lambda = \mu^2K^2/n(信噪比)超过1/e1/e,则子矩阵的支持集可通过优化的消息传递算法弱恢复(平均误分类误差o(K)o(K))。这扩展了Deshpande和Montanari先前针对K=Θ(n)K=\Theta(\sqrt{n})获得的结果。此外,只要信息论上可能,该算法可扩展以提供精确恢复,并且只要Knlogn(18e+o(1))K \geq \frac{n}{\log n} (\frac{1}{8e} + o(1))就能达到精确恢复的信息极限。算法的总运行时间为O(n2logn)O(n^2\log n)。子矩阵定位问题的另一个版本称为噪声双聚类,旨在大型n1×n2n_1\times n_2高斯矩阵中恢复具有升高均值μ\muK1×K2K_1\times K_2子矩阵。优化的消息传递算法及其分析被适配于双聚类问题,假设Ω(ni)Kio(ni)\Omega(\sqrt{n_i}) \leq K_i \leq o(n_i)K1K2.K_1\asymp K_2. 同时也确定了用于两个聚类弱恢复的尖锐信息论条件。

关键词

引用

@article{arxiv.1510.09219,
  title  = {Submatrix localization via message passing},
  author = {Bruce Hajek and Yihong Wu and Jiaming Xu},
  journal= {arXiv preprint arXiv:1510.09219},
  year   = {2015}
}