Hadoop 性能模型
分布式、并行与集群计算
2011-06-07 v1
摘要
Hadoop MapReduce 现已成为执行大规模数据分析的流行选择。本技术报告描述了一套详细的数学性能模型，用于刻画 MapReduce 作业在 Hadoop 上的执行过程。这些模型以作业执行中 map 和 reduce 任务内部各阶段的细粒度，描述了数据流与代价信息。这些模型可用于估算 MapReduce 作业的性能，以及寻找运行作业时使用的最优配置设置。
引用
@article{arxiv.1106.0940,
title = {Hadoop Performance Models},
author = {Herodotos Herodotou},
journal= {arXiv preprint arXiv:1106.0940},
year = {2011}
}
备注
16 pages, 0 figures, Duke University Technical Report