基于 SBC 的集群能效与性能评估:Hadoop 案例研究
分布式、并行与集群计算
2019-03-18 v1
摘要
数据中心的能效是一项挑战并引起了研究人员的兴趣。在本文中,我们通过利用基于单板计算机(SBC)的集群来解决小规模数据中心的能效问题。提出了一种紧凑的设计布局,使用各 20 个节点构建两个集群。我们进行了广泛测试,使用流行的性能基准对任务执行时间、内存/存储利用率、网络吞吐量与能耗方面的集群性能进行分析。此外,我们通过关联不同规模工作负载下各基准执行时间的能量利用来考察基于 SBC 的集群的运行成本。结果表明,尽管基于 ARM 的 SBC 构建的集群具有低成本优势,但由于板载能力有限,这些集群的可比性能与能效较低。可以通过调整 Hadoop 配置参数来使基于 ARM 的 SBC 集群高效利用资源。我们给出了关于基于 SBC 的集群作为廉价且绿色的云计算研究测试平台有效性的讨论。
引用
@article{arxiv.1903.06648,
title = {On Energy Efficiency and Performance Evaluation of SBC based Clusters: A Hadoop case study},
author = {Basit Qureshi and Anis Koubaa},
journal= {arXiv preprint arXiv:1903.06648},
year = {2019}
}
备注
12 pages. Submitted to Electronics Journal