一键式自动化关系数据库特征工程系统
数据库
2017-06-02 v1 人工智能
摘要
特征工程是预测分析项目中最重要且最耗时的任务之一。它涉及理解领域知识和进行数据探索,以从原始数据中发现相关的手工特征。本文介绍了一个名为One Button Machine(简称OneBM)的系统,该系统可自动发现关系数据库中的特征。OneBM自动执行数据科学家的一项关键活动,即连接数据库表并应用高级数据转换,以从数据中提取有用特征。我们在Kaggle竞赛中验证了OneBM,其表现与三个Kaggle竞赛中排名前16%至24%的数据科学家相当。更重要的是,在预测准确性和Kaggle排行榜排名方面,OneBM在一项Kaggle竞赛中优于最先进的系统。结果表明,OneBM对数据科学家和非专家都很有用。它帮助数据科学家减少数据探索时间,使他们能够在短时间内尝试和验证许多想法。另一方面,它使不熟悉数据科学的非专家能够以较少的努力、时间和成本快速从数据中提取价值。
引用
@article{arxiv.1706.00327,
title = {One button machine for automating feature engineering in relational databases},
author = {Hoang Thanh Lam and Johann-Michael Thiebaut and Mathieu Sinn and Bei Chen and Tiep Mai and Oznur Alkan},
journal= {arXiv preprint arXiv:1706.00327},
year = {2017}
}