【记录】网络调参

记录,根据网络参数来判断训练状态;


train loss不断下降, val(或test) loss不断下降: 说明网络仍在学习
train loss不断下降   val(或test) loss趋于不变: 说明网络过拟合
train loss趋于不变   val(或test) loss不断下降: 说明数据集100%有问题
train loss趋于不变   val(或test) loss趋于不变: 说明网络训不下去,需要减少学习率或批量数目;或者是数据集有问题(数据集标注错误数据比较多)
train loss不断上升   val(或test) loss不断上升: 说明网络结构设计不当,训练超参数设置不当,数据集为经过清洗等问题。 

猜你喜欢

转载自blog.csdn.net/Finks_Chen/article/details/103807151