SCHeMa:在异构机器集群上调度科学容器
分布式、并行与集群计算
2022-03-23 v2
摘要
在数据驱动科学时代,许多科学家日常工作中都包含利用异构计算集群分析大型数据集的计算实验。此外,为确保其结果的可信度,这些分析能够被其他研究人员轻松复现至关重要。尽管近年来已引入各种可在此方向上便利科学家工作的技术,但仍缺乏将它们结合起来以实现该目标的开源平台。在本工作中,我们描述并演示了 SCHeMa,一个利用容器化、实验打包、工作流管理和机器学习技术的开源平台,可便利异构集群上计算分析的执行与可复现性。
引用
@article{arxiv.2103.13138,
title = {SCHeMa: Scheduling Scientific Containers on a Cluster of Heterogeneous Machines},
author = {Thanasis Vergoulis and Konstantinos Zagganas and Loukas Kavouras and Martin Reczko and Stelios Sartzetakis and Theodore Dalamagas},
journal= {arXiv preprint arXiv:2103.13138},
year = {2022}
}