AdCraft：面向搜索引擎营销优化的高级强化学习基准环境
机器学习
2023-11-16 v3 人工智能
摘要
我们介绍 AdCraft，一个面向强化学习（RL）社区的新型基准环境，其以随机与非平稳特性为鲜明特征。该环境模拟搜索引擎营销（SEM）中的出价与预算动态，SEM 是一种利用付费广告提升网站在搜索引擎结果页（SERPs）可见性的数字营销技术。SEM 广告活动的表现取决于若干因素，包括关键词选择、广告设计、出价管理、预算调整与效果监测。深度 RL 近期成为在 SEM 复杂动态环境中优化活动盈利性的潜在策略，但其需要大量数据，而实践中获取这些数据可能成本高昂或不可行。我们的可定制环境使从业者能够在不承担此类成本的情况下，评估并增强与 SEM 出价及预算管理相关的 RL 算法的鲁棒性。通过在该环境中的一系列实验，我们展示了稀疏性与非平稳性对智能体收敛与性能所带来的挑战。我们希望这些挑战进一步促进围绕管理现实世界不确定性的有效策略的讨论与发展。
引用
@article{arxiv.2306.11971,
title = {AdCraft: An Advanced Reinforcement Learning Benchmark Environment for Search Engine Marketing Optimization},
author = {Maziar Gomrokchi and Owen Levin and Jeffrey Roach and Jonah White},
journal= {arXiv preprint arXiv:2306.11971},
year = {2023}
}