深度学习 知识积累

《TensorFlow实战》
《TensorFlow:实战google深度学习框架》
西瓜书
  深度学习-花书

1.减少high bias的方法：
通常是增加神经网络的隐藏层个数、神经元个数，训练时间延长，选择其它更复杂的NN模型等；
减少high variance的方法：
通常是增加训练样本数据，进行正则化Regularization，选择其他更复杂的NN模型等。
2.对于Tensorflow的代码实现而言，实现代码的结构如下：
   1. 创建Tensorflow变量（此时，尚未直接计算）
   2. 实现Tensorflow变量之间的操作定义
   3. 初始化Tensorflow变量
   4. 创建Session
   5. 运行Session，此时，之前编写操作都会在这一步运行。
3.Caffe 安装：
https://www.jianshu.com/p/5afdb561ce94