中文

用于改进带最坏情况保证的流式分位数近似的学习型插值方法

数据结构与算法 2023-04-18 v1 数据库 机器学习

摘要

nn 个输入的流上,一个 ε\varepsilon-近似分位数草图将任意查询点 qq 的秩(即小于 qq 的输入点数量)近似至 εn\varepsilon n 的加性误差以内,通常以至少 11/poly(n)1 - 1/\mathrm{poly}(n) 的概率,同时消耗 o(n)o(n) 空间。尽管 Karnin、Lang 和 Liberty 提出的著名 KLL 草图在最坏情况流上实现了可证明最优的分位数近似算法,但其实践中达成的近似常远非最优。事实上,实践中最常用的是 Dunning 的 t-digest,它在真实数据上常比 KLL 取得好得多的近似,但已知在最坏情况下会产生任意大的误差。我们将插值技术应用于流式分位数问题,试图在真实数据集上取得优于 KLL 的近似,同时在最坏情况下保持类似保证。

关键词

引用

@article{arxiv.2304.07652,
  title  = {Learned Interpolation for Better Streaming Quantile Approximation with Worst-Case Guarantees},
  author = {Nicholas Schiefer and Justin Y. Chen and Piotr Indyk and Shyam Narayanan and Sandeep Silwal and Tal Wagner},
  journal= {arXiv preprint arXiv:2304.07652},
  year   = {2023}
}

备注

11 pages, 5 figures, published at SIAM ACDA 2023