Scifaro

中文

神经架构搜索的实用技巧集

机器学习 2021-07-09 v1 人工智能机器学习

作者: Thomas Elsken , Benedikt Staffler , Arber Zela , Jan Hendrik Metzen , Frank Hutter

在 arXiv 上查看 ↗ PDF ↗

摘要

尽管神经架构搜索方法在过去几年中取得了成功，并在各种问题上带来了新的最先进性能，但它们也因不稳定、对其超参数高度敏感以及经常不比随机搜索表现更好而受到批评。为了阐明这一问题，我们讨论了一些有助于改善稳定性、效率和整体性能的实用考量。

关键词

神经架构搜索超参数稳定性效率随机搜索实用考量

引用

@article{arxiv.2107.03719,
  title  = {Bag of Tricks for Neural Architecture Search},
  author = {Thomas Elsken and Benedikt Staffler and Arber Zela and Jan Hendrik Metzen and Frank Hutter},
  journal= {arXiv preprint arXiv:2107.03719},
  year   = {2021}
}