谷歌大脑深度学习从入门到精通课程「2.11」:训练神经网络

AI100 已经引入 Hugo Larochelle 教授的深度学习课程,会每天在公众号中推送一到两节课,并且对视频中的 PPT 进行讲解。课后,我们会设计一系列的问题来巩固课程中的知识。本节课是 Hugo Larochelle 教授深度学习第二章节的第十一节课。

课程主要内容

  1. 局部最优和全局最优的讨论。(P2)

  2. Andrej Karpathy关于优化的可视化界面。(P3)

  3. 收敛条件讨论,学习率常数下降。(P4)

  4. 将动量方法加到优化中。(P5)

  5. 牛顿方法。(P6 - P7)

视频加载中...

相关推荐