ICML亮点论文：随机优化算法的证明以及在架构搜索上的应用

机器之心原创作者：Sushen Zhang 编辑：Haojin YangICML 全称是 International Conference on Machine Learning，由国际机器学习学会（IMLS）举办，是计算机人工智能领域的顶级会议。今年的 ICML2019 是第 36 届的会议，将于 6 月 9 日至 15 日在加州的 Long Beach 的举办，此次会议共收录了 236 篇文章。而在本年的 ICML 网站上，也公布了下一届 ICML 将于 7 月 13-18 号在奥地利的维也纳举办。本文将分析 3 篇今年 ICML 的文章，重点在优化算法上。前两篇是用数学方法证明了随机算法的收敛性、在寻找全局最优解的优势。而后一篇是对于随机梯度法在架构搜索上的应用。因此，本文所讨论的 3 篇论文有：AdaGrad stepsizes: sharp convergence over nonconvex landscapes, from any initializationGradient Descent Finds Global Minima of Dee ………………………………