一种用于平台无关计算实验管理的无服务器工具
分布式、并行与集群计算
2018-09-21 v1 软件工程
摘要
在数据采集计划和日益计算密集型工具的推动下，神经科学已被带入大数据与高性能计算（HPC）领域。尽管管理 HPC 实验需要相当的技术造诣，但已开发出平台与标准以减轻科学家的负担。虽然网络门户使资源广泛可访问，但诸如脑成像数据结构（Brain Imaging Data Structure）之类的数据组织以及诸如 Boutiques 之类的工具描述语言，为研究人员使用自己的数据集、流水线和环境解决这些问题提供了立足点。尽管这些标准降低了神经科学应用采用 HPC 和云系统的门槛，它们仍需要整合分散的领域特定知识。我们提出 Clowdr，一种轻量级工具，用于在 HPC 系统和云上启动实验、记录丰富的执行记录，并实现实验摘要与结果的可访问共享。Clowdr 独特地位于实验管理的网络平台与裸机应用之间，在保留自助解决方案灵活性的同时，为开发、部署和传播神经科学分析提供了低门槛。
引用
@article{arxiv.1809.07693,
title = {A Serverless Tool for Platform Agnostic Computational Experiment Management},
author = {Gregory Kiar and Shawn T Brown and Tristan Glatard and Alan C Evans},
journal= {arXiv preprint arXiv:1809.07693},
year = {2018}
}
备注
12 pages, 3 figures, 1 tool