梯度下降法

本来想自己再写一次，但想到要弄那么多图片和公式，怕了……

直接贴参考资料吧。

http://www.cnblogs.com/tornadomeet/archive/2012/04/10/2441148.html

梯度下降法: http://zh.wikipedia.org/wiki/%E6%A2%AF%E5%BA%A6%E4%B8%8B%E9%99%8D%E6%B3%95

要理解梯度下降，就得知道梯度是什么？这个网址【http://sxyd.sdut.edu.cn/gaoshu2/lesson/8.7fangxiangdaoshuyutidu.htm】里面有定义，以及为什么梯度的反方向是下降最快的方向？

http://www.iro.umontreal.ca/~bengioy/ift6266/H12/html/gradient_en.html

http://math.stackexchange.com/questions/180559/why-gradient-descent-works

• ← 随机梯度下降法步长的选择
• ubuntu apt-add-repository: command not found →