中文

分布式函数监测的紧致界

数据结构与算法 2013-06-13 v3

摘要

我们解决了由 Cormode、Muthukrishnan 和 Yi (SODA, 2008) 开创的分布式函数监测领域中的几个基本问题。在该模型中,有 kk 个站点,每个站点跟踪其输入并与中央协调器通信,协调器持续维护在所有输入的并集上计算的函数 ff 的近似输出。目标是最小化通信。我们证明,将不同元素的数量估计到 1+\eps1+\eps 因子内的随机化通信复杂度为 Ω~(k/\eps2)\tilde{\Omega}(k/\eps^2),改进了先前的 Ω(k+1/\eps2)\Omega(k + 1/\eps^2) 界,并在对数因子范围内匹配了已知的上界。对于 pp 阶频率矩 FpF_pp>1p > 1),我们将先前的 Ω(k+1/\eps2)\Omega(k + 1/\eps^2) 通信界改进为 Ω~(kp1/\eps2)\tilde{\Omega}(k^{p-1}/\eps^2)。对于 heavy hitters、经验熵和其他问题,我们获得了类似的改进。我们还表明,对于任何 p>1p > 1,我们可以使用 O~(kp1\poly(\eps1))\tilde{O}(k^{p-1}\poly(\eps^{-1})) 的通信来估计 FpF_p。这极大地改进了 Cormode、Muthukrishnan 和 Yi 针对一般 pp 的先前的 O~(k2p+1N12/p\poly(\eps1))\tilde{O}(k^{2p+1}N^{1-2/p} \poly(\eps^{-1})) 界,以及他们针对 p=2p = 2O~(k2/\eps+k1.5/\eps3)\tilde{O}(k^2/\eps + k^{1.5}/\eps^3) 界。对于 p=2p = 2,我们的界解决了他们的主要开放问题。我们的下界基于关于近似多数的新直接和定理,并对数据流模型中的问题产生了显著的改进,将 tt 趟中估计 FpF_pp>2p > 2)的界从 Ω~(n12/p/(\eps2/pt))\tilde{\Omega}(n^{1-2/p}/(\eps^{2/p} t)) 改进为 Ω~(n12/p/(\eps4/pt))\tilde{\Omega}(n^{1-2/p}/(\eps^{4/p} t)),给出了在不使用 gap-hamming 问题的情况下,tt 趟中估计 F0F_0 的首个 Ω(1/(\eps2t))\Omega(1/(\eps^2 t)) 比特空间的界。

关键词

引用

@article{arxiv.1112.5153,
  title  = {Tight Bounds for Distributed Functional Monitoring},
  author = {David P. Woodruff and Qin Zhang},
  journal= {arXiv preprint arXiv:1112.5153},
  year   = {2013}
}

备注

Added a formal embedding argument in Section 3.2.2. This embedding argument required some other changes in Section 3, causing us to relax the definition of k-GAP-MAJ to k-APPROX-SUM, which is a similar problem. We still use the original k-GAP_MAJ in Section 6.1. Section 4 also now has missing details regarding the predictor