中文

超越网格:基于自适应离散化的多目标贝叶斯优化

机器学习 2025-09-25 v4 应用统计 机器学习

摘要

我们考虑优化一个向量值目标函数 f\boldsymbol{f} 的问题,该函数从高斯过程(GP)中采样,其指标集是一个性质良好、紧致的度量空间 (X,d)({\cal X},d)(设计空间)。我们假设 f\boldsymbol{f} 事先未知,且在设计 xx 处对 f\boldsymbol{f} 的评估会得到 f(x)\boldsymbol{f}(x) 的含噪观测。由于当 X{\cal X} 的基数很大时,通过穷举搜索识别帕累托最优设计是不可行的,我们提出了一种称为 Adaptive ϵ\boldsymbol{\epsilon}-PAL 的算法,该算法利用 GP 采样函数的平滑性和 (X,d)({\cal X},d) 的结构来快速学习。本质上,Adaptive ϵ\boldsymbol{\epsilon}-PAL 采用基于树的自适应离散化技术,以尽可能少的评估次数识别 ϵ\boldsymbol{\epsilon}-精确的帕累托设计集。我们给出了 ϵ\boldsymbol{\epsilon}-精确帕累托集识别的样本复杂度的信息论类型和度量维度类型界限。我们还通过实验表明,我们的算法优于其他帕累托集识别方法。

关键词

引用

@article{arxiv.2006.14061,
  title  = {Beyond Grids: Multi-objective Bayesian Optimization With Adaptive Discretization},
  author = {Andi Nika and Sepehr Elahi and Çağın Ararat and Cem Tekin},
  journal= {arXiv preprint arXiv:2006.14061},
  year   = {2025}
}