Chimbuko：一种工作流级可扩展性能轨迹分析工具
分布式、并行与集群计算
2020-09-01 v1 性能
摘要
由于当前输入/输出系统对高性能计算系统的限制，包含在线数据缩减与分析的新一代工作流正在涌现。由于其执行模式与底层硬件的复杂性，诊断其性能需要精密的性能分析能力，且现有工具均无法处理检测潜在问题所需的大量性能轨迹数据。本工作介绍Chimbuko，一种提供实时、分布式、原位异常检测的性能分析框架。数据量被缩减至人工可处理水平而不丢失必要细节。Chimbuko通过可视化模块支持在线性能监测，该模块呈现整体工作流异常分布、调用栈与时间线。Chimbuko还支持性能溯源的捕获与缩减。据我们所知，Chimbuko是首个在线、分布式且可扩展的工作流级性能轨迹分析框架，并在橡树岭国家实验室的Summit系统上展示了该工具的实用性。
引用
@article{arxiv.2008.13742,
title = {Chimbuko: A Workflow-Level Scalable Performance Trace Analysis Tool},
author = {Sungsoo Ha and Wonyong Jeong and Gyorgy Matyasfalvi and Cong Xie and Kevin Huck and Jong Youl Choi and Abid Malik and Li Tang and Hubertus Van Dam and Line Pouchard and Wei Xu and Shinjae Yoo and Nicholas D'Imperio and Kerstin Kleese Van Dam},
journal= {arXiv preprint arXiv:2008.13742},
year = {2020}
}