1.SGD的难处：
考虑z=1/20*x2+y2图像，
等高线图和负梯度方向：
假设从（-7,2）这一点开始进行梯度更新（下降）：
learningrate=0.9;
x-=0.9*(1/10)*x (1)
y-=0.9*2*y (2)
把（-7,2）这一点带入（1）和（2）式中，得到一个新的(x,y)，继续带入，可以得到一个x的列表和y的列表，这个列表代表了梯度下降的路线。
假设走40步：
adam优化算法
原文：https://www.cnblogs.com/yibeimingyue/p/11806408.html
