MPI Malleability 在模拟真实 HPC 条件下的验证
分布式、并行与集群计算
2026-04-30 v1
摘要
动态资源管理(DRM)技术可用于在计算集群中最大化吞吐量和资源利用率。尽管 DRM 已通过分析工作负载和仿真广泛研究,但关于其在真实世界条件下可行性的怀疑仍然存在于系统管理员和用户之间。为解决此问题,我们提出了一种用于验证 DRM 技术(如可塑性)在真实场景中可行性的新方法,这些场景通过在高性能计算(HPC)基础设施上重放工作负载日志来再现实际集群中的作业和用户条件。我们的方法能够将工作负载适应目标集群。我们在 Marenostrum 5 超级计算机的一个 125 节点分区上实现了可塑性。在我们的实验结果表明,所提出的方法得到了验证,并评估了 MPI 可塑性在我们“博士生”用户的一种新型用例中的优势:并行效率感知的可塑性在不延迟基准工作负载的情况下,将可塑性工作负载时间缩短了 27%,尽管为 individual jobs 引入了排队延迟,但保持了资源利用率。
引用
@article{arxiv.2604.26576,
title = {MPI Malleability Validation under Replayed Real-World HPC Conditions},
author = {S. Iserte and M. Madon and G. Da and J. Pierson and A. J. Peña},
journal= {arXiv preprint arXiv:2604.26576},
year = {2026}
}