Spark中的自适应过滤器排序
数据库
2019-05-07 v1 分布式、并行与集群计算
摘要
本报告描述了一种使Apache Spark执行引擎具备自适应能力的技术方法。它给出了具体的工程解决方案,专门针对具有演化统计特性的数据流中谓词的适应性重排序。所开发的系统扩展可作为开源原型使用。指示性实验结果显示了其开销以及对调优参数的敏感性。
引用
@article{arxiv.1905.01349,
title = {Adaptive filter ordering in Spark},
author = {Nikodimos Nikolaidis and Anastasios Gounaris},
journal= {arXiv preprint arXiv:1905.01349},
year = {2019}
}
备注
9 pages