本文摘自: https://www.cnblogs.com/pinard/p/6422831.html http://www.cnblogs.com/charlotte77/p/5629865.html 一.DNN求解参数的方法 在监督学习中,优化参数的方法 首先我们都会定义一个目标函数,一般来讲都是损失函数 通过最小化损失函数,求得最优参数 不断迭代上一个步骤直到收敛,也就是损失函数基本不再变化 在DNN神经网络中,前向传播算法,主要是用来计算一层接着一层的输入值,通过计算出来的最后一层的输出