深度学习模型训练基本步骤

原文转自这里

一.数据预处理

二.将数据输入神经网络(每个神经元先输入值加权累加再输入激活函数作为该神经元的输出值)正向传播,得到得分

三.将“得分”输入误差函数loss function(正则化惩罚,防止过度拟合),与期待值比较得到误差,多个则为和,通过误差判断识别程度(损失值越小越好)

四.通过反向传播(反向求导,误差函数和神经网络中每个激活函数都要求,最终目的是使误差最小)来确定梯度向量

五.最后通过梯度向量来调整每一个权值,向“得分”使误差趋于0或收敛的趋势调节(SGD算法)

六.重复上述过程直到设定次数或损误差失的平均值不再下降(最低点)

训练完成

猜你喜欢

转载自blog.csdn.net/moyu916/article/details/88539506