YARN 资源调度器架构:集群管理、资源分配、队列管理

来自书籍:HADOOP内幕:yarn架构 

资源调度器是Hadoop YARN中最核心的组件之一,它是ResourceManager中的一个插拔式服务组件,负责整个集群资源的管理与

分配。在YARN中,资源调度器式以层级队列方式组织资源的,这种组织方式符合公司的组织架构,有利于资源在不同

资源间分配和共享,进行提高集群资源利用率。

YARN自带了FIFO\Capacity Scheduler 和Fair Scheduler三种常用资源调度器。

资源调度器基本架构

 

 

 

 

 

 

 

 

 

container 与NodeManger关系

资源隔离 

 

节点健康情况检测与管理

 

 

分布式缓存机制

 

 

猜你喜欢

转载自blog.csdn.net/zhuiqiuuuu/article/details/84330474