python的分布式计算框架

ray

作为分布式系统，ray遵循了典型的Master-Slave设计，Master负责全局协调和状态维护，Slave执行分布式计算任务

关键组件

Global Scheduler:

Global Control State:

Object Store:

Worker:

主要API

启动：ray.init() 该方法可以加参数，如num_cpus等

远程函数：

put和get：用作python对象和对象ID之间的转换

任务依赖：

Actors：

ray.wait()：

扫描二维码关注公众号，回复： 13224761 查看本文章

dask

Reference