自监督表示学习中的良好实践探析
计算机视觉与模式识别
2020-12-03 v1 人工智能
机器学习
摘要
自监督表示学习在过去几年中取得了显著进展。近来，对比实例学习相比其有监督学习对应方法展现出了令人印象深刻的结果。然而，尽管对对比实例学习的兴趣与日俱增，这些方法为何如此有效在很大程度上仍不清楚。在本文中，我们旨在揭示其成功背后的一些奥秘，即良好的实践。通过广泛的实证分析，我们希望不仅能提供见解，还能梳理出一套促成近期自监督表示学习工作成功的良好实践。
引用
@article{arxiv.2012.00868,
title = {Towards Good Practices in Self-supervised Representation Learning},
author = {Srikar Appalaraju and Yi Zhu and Yusheng Xie and István Fehérvári},
journal= {arXiv preprint arXiv:2012.00868},
year = {2020}
}