Machine Learning Engineer (Ads) Interview Questions

A Guide to Pass the MLE interview.

tutorial
Published

January 27, 2023

Adam那么棒,为什么还对SGD念念不忘 (1) —— 一个框架看懂优化算法

Adam那么棒,为什么还对SGD念念不忘 (2) —— 一个框架看懂优化算法

Adam那么棒,为什么还对SGD念念不忘 (3) —— 一个框架看懂优化算法

1 优化器

1.1 发展历程

SGD -> SGDM -> NAG ->AdaGrad -> AdaDelta -> Adam -> Nadam

  1. 优化器介绍、区别、优缺点

  2. 知道什么前沿的优化器么

  3. adam有什么问题该怎么改进