文章目录
from: https://www.bilibili.com/video/BV1yJ411v7oF/
https://www.youtube.com/watch?v=gVcnOe6_c6Q
转载，原作者Shusen Wang。
这节课的主要内容：
0:28 Motivation：并行计算有什么用？为什么机器学习的人需要懂并行计算。
2:42 最小二乘回归（如果已经懂最小二乘，建议跳到 6:43 ）。
6:43 用并行计算来解最小二乘回归。
11:14 并行计算中的通信问题。
13:10 MapReduce，已经如何用MapReduce实现并行梯度下降，以及通信、同步的问题
