神经网络训练过程中tips

  1. 过滤器(权重)的初始化方法:(参考如下博客)
    tf1.x权重初始化方法
  2. 学习率调整,包含学习率的衰减阶段和衰减的比例;
  3. 正则化程度调整
  4. 激活函数选择
  5. 损失函数计算方式
  6. 优化器选择
  7. batch_size的大小选择;

猜你喜欢

转载自blog.csdn.net/qq_43348528/article/details/105116700