Spark内核源码深度剖析(5) -Worker解析

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/u012292754/article/details/86093870

1 Worker 解析

  • Worker 启动 Driver 的一个基本的原理,Worker内部会启动一个线程,这个线程可以理解为,就是 DriverRunner 。然后 DriverRunner 会去负责启动 Driver 进程,并在之后对Driver 进程进行管理;
  • Worker启动Executor,其实和 Driver 的原理是一致的,都是通过一个 Worker 内部的本地线程,也就是 ExecutorRunner,去启动 Executor进程,然后在之后对 Executor进程进行管理;
    在这里插入图片描述

猜你喜欢

转载自blog.csdn.net/u012292754/article/details/86093870