nuts-flow/ml:面向深度学习的数据预处理
机器学习
2018-01-11 v2 软件工程
摘要
数据预处理是任何机器学习应用的基础部分,且在开发机器学习解决方案时通常是最耗时的环节。深度学习的预处理以流水线为特征,这些流水线延迟加载数据并执行数据变换、增强、批处理与日志记录。这些功能中有许多在各应用间是通用的,但在训练、测试或推理时需要不同的排列组合。在此我们介绍一个名为 nuts-flow/ml 的新软件框架,它将常见的预处理操作封装为组件,可以灵活排列以快速构建高效的深度学习预处理流水线。
关键词
引用
@article{arxiv.1708.06046,
title = {nuts-flow/ml: data pre-processing for deep learning},
author = {S. Maetschke and R. Tennakoon and C. Vecchiola and R. Garnavi},
journal= {arXiv preprint arXiv:1708.06046},
year = {2018}
}
备注
11 pages, 4 figures