中文

哪些例外低维投影的高斯点云可以在多项式时间内找到?

概率论 2025-10-20 v3 机器学习 最优化与控制

摘要

给定 dd 维标准高斯向量 x1,,xn\boldsymbol{x}_1,\dots, \boldsymbol{x}_n,我们考虑其所有 mm 维投影的经验分布,其中 mm 为固定常数。Diaconis 和 Freedman (1984) 证明,如果 n/dn/d\to \infty,则所有此类分布收敛于标准高斯分布。相反,我们研究比例渐进,即 n,dn,d\to \inftyn/dα(0,)n/d\to \alpha \in (0, \infty)。在这种情况下,数据点在典型随机子空间上的投影仍为高斯分布,但由所有可作为 mm 维投影的概率分布组成的集合 Fm,α\mathscr{F}_{m,\alpha} 包含对应例外子空间的非高斯分布。统计物理中非严谨的方法可通过广义 Parisi 公式间接地 characterize Fm,α\mathscr{F}_{m,\alpha}。为了将此公式置于严谨基础之内,并理解这些投影是否可被有效找到,我们研究子集 Fm,αalgFm,α\mathscr{F}^{\rm alg}_{m,\alpha}\subseteq \mathscr{F}_{m,\alpha},其由一类迭代算法实现。我们证明,该集合可由某种随机最优控制问题 characterize,并通过扩展 Parisi 公式的变分原理对该问题进行对偶 characterization。作为副产品,我们获得了包含“广义球形感知器”模型等一类随机优化问题的可计算值。

关键词

引用

@article{arxiv.2406.02970,
  title  = {Which exceptional low-dimensional projections of a Gaussian point cloud can be found in polynomial time?},
  author = {Andrea Montanari and Kangjie Zhou},
  journal= {arXiv preprint arXiv:2406.02970},
  year   = {2025}
}

备注

72 pages, accepted to Annals of Probability