数据复制对分层数据网格中作业调度性能的影响
分布式、并行与集群计算
2010-10-05 v1
摘要
在数据密集型应用中,数据传输是导致作业执行延迟的主要原因。数据访问时间取决于带宽。支持网格中快速数据访问的主要瓶颈是广域网和互联网的高延迟。有效的调度可以通过将作业分派到所需数据所在的位置来减少跨互联网传输的数据量。另一种解决方案是使用数据复制机制。动态复制策略的目标是减少文件访问时间,从而减少作业运行时间。在本文中,我们开发了一种作业调度策略和一种称为HRS(分层复制策略)的动态数据复制策略,以提高数据访问效率。我们通过仿真研究了我们的方法并对其进行了评估。结果表明,我们的算法比现有策略提高了12%。
引用
@article{arxiv.1010.0562,
title = {The Impact of Data Replicatino on Job Scheduling Performance in Hierarchical data Grid},
author = {Somayeh Abdi and Hossein Pedram and Somayeh Mohamadi},
journal= {arXiv preprint arXiv:1010.0562},
year = {2010}
}
备注
11 pages, 7 figures