高性能计算系统中基于作业分组的规模比例调优
分布式、并行与集群计算
2023-12-01 v1
摘要
在超级计算机作业初始化期间,不会执行任何有用的计算。初始化时间占比较高会导致计算资源闲置且计算效率降低。某些将作业组合成组的方法与算法被用于优化高初始化占比作业的调度。本文考虑了在作业组形成算法中规模比例设置对 workload 管理器性能指标的影响。该研究在作者开发的基于 Alea 的 workload 管理器模型上进行。该模型能够在合理时间内开展大量实验且不损失仿真精度。我们进行了一系列涉及不同 workload 特征的实验。本文给出了针对不同初始化时间占比以及具有不同强度与同质性的输入工作流,规模比例对效率指标影响的研究结果。所呈现的结果可使 workload 管理器管理员设定一个在相互矛盾的效率指标间提供适当平衡的规模比例。
引用
@article{arxiv.2311.17889,
title = {Scale Ratio Tuning of Group Based Job Scheduling in HPC Systems},
author = {Lyakhovets D. S. and Baranov A. V. and Telegin P. N},
journal= {arXiv preprint arXiv:2311.17889},
year = {2023}
}