欠定线性方程组稀疏整数解的恢复
信息论
2015-03-19 v2 离散数学
机器学习
math.IT
摘要
我们考虑一个包含个变量的个线性方程组,其中是给定的矩阵,是给定的维向量,且已知等于某个未知解的,其中是整数且-稀疏:且中恰好有个元素为 1。我们给出了利用最小化的范数的线性规划(LP)松弛来精确恢复解的充要条件。当从具有可交换列的分布中抽取时,我们展示了恢复概率与几何学中一个著名问题(即-集问题)之间的有趣联系。据我们所知,这种联系在压缩感知文献中似乎是新的。我们通过实验表明,对于大的,如果的元素独立同分布地取自正态分布,则恢复 LP 的性能表现出相变,即对于每个,存在一个的值,使得当时恢复总是成功,而当时恢复总是失败。利用实验数据,我们猜想,其中是二元熵函数。
引用
@article{arxiv.1112.1757,
title = {Recovery of a Sparse Integer Solution to an Underdetermined System of Linear Equations},
author = {T. S. Jayram and Soumitra Pal and Vijay Arya},
journal= {arXiv preprint arXiv:1112.1757},
year = {2015}
}
备注
4 pages, contributed paper to be published at NIPS 2011 Workshop on Sparse Representation and Low-rank Approximation, 16 December 2011