全局思考局部行动:高维类别与混合搜索空间上的贝叶斯优化
机器学习
2021-06-11 v2 机器学习
摘要
高维黑盒优化仍是一个重要但众所周知的难题。尽管贝叶斯优化方法在连续域上取得了成功,但类别域或连续与类别变量混合的域仍然具有挑战性。我们提出了一种新颖的解决方案——我们将局部优化与定制的核设计相结合,有效处理高维类别与混合搜索空间,同时保持采样效率。我们进一步推导了所提方法的收敛性保证。最后,我们通过实验证明,在多种合成和真实世界任务上,我们的方法在性能、计算成本或两者方面均优于当前基线。
引用
@article{arxiv.2102.07188,
title = {Think Global and Act Local: Bayesian Optimisation over High-Dimensional Categorical and Mixed Search Spaces},
author = {Xingchen Wan and Vu Nguyen and Huong Ha and Binxin Ru and Cong Lu and Michael A. Osborne},
journal= {arXiv preprint arXiv:2102.07188},
year = {2021}
}
备注
ICML 2021. 9 page, 6 figures (26 pages, 16 figures, 2 tables including references and appendices)