中文

非对称性有益:非对称扰动低秩矩阵的特征值与特征向量分析

统计理论 2023-01-10 v5 信息论 数值分析 信号处理 math.IT 数值分析 机器学习 统计理论

摘要

本文关注统计非对称性与谱方法之间的相互作用。假设我们感兴趣于估计一个秩为1且对称的矩阵MRn×n\mathbf{M}^{\star}\in \mathbb{R}^{n\times n},但仅观测到一个随机扰动的版本M\mathbf{M}。噪声矩阵MM\mathbf{M}-\mathbf{M}^{\star}由零均值独立(但不必同方差)元素组成,因此一般不是对称的。例如,当我们对M\mathbf{M}^{\star}的每个元素有两个独立样本并将其排列为一个{\em 非对称}数据矩阵M\mathbf{M}时,就可能出现这种情况。目标是估计M\mathbf{M}^{\star}的主特征值和特征向量。我们证明,数据矩阵M\mathbf{M}的主特征值在特征值估计中可以比其(未调整的)主奇异值精确O(n)O(\sqrt{n})倍——直至某个对数因子。此外,任意线性形式的M\mathbf{M}的主特征向量的扰动——例如逐元素特征向量扰动——被证明是良好可控的。这种特征分解方法完全自适应于噪声的异方差性,无需仔细的偏差校正或任何关于噪声方差的先验知识。我们还提供了更一般的秩-rr情形的部分理论。核心结论是:以非对称方式排列数据样本并执行特征分解有时可能是有益的。

关键词

引用

@article{arxiv.1811.12804,
  title  = {Asymmetry Helps: Eigenvalue and Eigenvector Analyses of Asymmetrically Perturbed Low-Rank Matrices},
  author = {Yuxin Chen and Chen Cheng and Jianqing Fan},
  journal= {arXiv preprint arXiv:1811.12804},
  year   = {2023}
}

备注

accepted to Annals of Statistics, 2020. 37 pages