谢邀，在这里除了讲adam，还想帮你解决一下文章看不懂的问题。 文章和论文看不懂，通常有三个原因： 对前置知识掌握不佳 没有结合理论与实践 没有对知识形象理解 adam本质上实际. In a bas library special collection of articles, learn about a controversial interpretation of the creation of woman, and explore other themes related to adam 三、adam优化算法的基本机制 adam 算法和传统的随机梯度下降不同。随机梯度下降保持单一的学习率（即 alpha）更新所有的权重，学习率在训练过程中并不会改变。而 adam 通过计算梯.
Adam： adam优化算法基本上就是将 momentum和 rmsprop结合在一起。 前面已经了解了momentum和rmsprop，那么现在直接给出adam的更新策略， ==adam算法结合了.
