随机块模型中的弱恢复、假设检验与互信息
概率论
2025-02-25 v2 信息论
社会与信息网络
组合数学
math.IT
统计理论
统计理论
摘要
随机块模型是社区随机图的标准模型。它在社会科学和统计学中作为社区模型的引入,在理论计算机科学中作为图划分问题的平均情况模型,称为 "planted partition model"。给定稀疏随机块模型,两个标准推断任务为:(i) 弱恢复:我们能否以非平凡的与真实社区重合度来估计社区?(ii) 检测/假设检验:我们能否以图大小趋于无穷时概率趋于 1 的概率,区分样本是来自块模型还是来自无社区结构的随机图?本文我们表明,对于稀疏随机块模型,这两个推断任务在一个临界点处除外是等价的。即,只有当检测是可能时,弱恢复才信息论上可能。我们因此发现这两个推断概念之间的强烈联系。我们进一步证明,当检测不可能时,基于邻接矩阵低阶多项式的显式假设检验实现了最优统计功效。该低阶检验是有效的,而似然比检验则尚不知道是否有效。此外,我们证明当检测不可能时,观察网络与社区结构之间的渐近互信息 exhibits a phase transition at the weak recovery threshold。我们的结果在更广泛的设置下得到证明,包括超图随机块模型和一般植入因子图。在这些设置下,我们证明了弱恢复不可能意味着等距性,并提供一个保证弱恢复与检测等价的条件。
引用
@article{arxiv.2406.15957,
title = {Weak recovery, hypothesis testing, and mutual information in stochastic block models and planted factor graphs},
author = {Elchanan Mossel and Allan Sly and Youngtak Sohn},
journal= {arXiv preprint arXiv:2406.15957},
year = {2025}
}
备注
80 pages