GALOIS:一种混合且平台无关的流处理架构
分布式、并行与集群计算
2023-05-04 v1 数据库
摘要
随着物联网环境的日益普及,处理海量分布式数据流的需求已成为一项关键挑战。边缘端数据流处理(DSPoE)系统已成为应对该挑战的一种方案,但其往往难以应对硬件与平台的异构性。为解决此问题,我们提出了一种名为 GALOIS 的新型混合 DSPoE 架构,其基于 WebAssembly(Wasm),并且与硬件、平台和语言无关。GALOIS 采用多层方法,结合 P2P 与主从概念用于组件间通信。我们给出的实验结果表明,在 Wasm 中执行的操作符在能耗和 CPU 消耗方面优于 Docker 中的操作符,这使其成为 DSPoE 中流操作符的一个有前景的选择。因此我们期望基于 Wasm 的解决方案能显著提升 DSPoE 系统的性能与弹性。
引用
@article{arxiv.2305.02063,
title = {GALOIS: A Hybrid and Platform-Agnostic Stream Processing Architecture},
author = {Tarek Stolz and István Koren and Liam Tirpitz and Sandra Geisler},
journal= {arXiv preprint arXiv:2305.02063},
year = {2023}
}