多租户数据平台中用于数据质量管理的语义模式
软件工程
2019-08-29 v1
摘要
Schibsted Media Group是一家业务遍及20多个国家的全球市场公司。其正经历数字化转型，将数据孤岛转换为基于通用数据平台的多租户系统。基于语义层通用模式的良好数据质量对于跨市场构建成功的数据驱动产品至关重要。为解决此挑战，我们开发了基于语义模式管理系统的数据质量工具，以支持带版本控制、测试与转换的模式演化。它可监控不同应用的数据质量要求并处理由多模式版本组成的传入数据。如今该系统已在生产环境运行，每日为超过100个应用处理超过十亿条事件。
引用
@article{arxiv.1908.10754,
title = {A Semantic Schema for Data Quality Management in a Multi-Tenant Data Platform},
author = {Ning Zhou and Sandra Garcia Esparza and Lars Marius Garshol},
journal= {arXiv preprint arXiv:1908.10754},
year = {2019}
}