B05 - 051、Reducetask并行度机制

0、Reducetask并行度机制

初学耗时：0.5h

注：CSDN手机端暂不支持章节内链跳转，但外链可用，更好体验还请上电脑端。

一、Reducetask并行度机制

---

记忆词：

  Reducetask并行度机制

---

 ギ 舒适区ゾ || ♂ 累觉无爱 ♀

一、Reducetask并行度机制

• reducetask 并行度同样影响整个 job 的执行并发度和执行效率，与 maptask的并发数由切片数决定不同，Reducetask 数量的决定是可以直接手动设置：job.setNumReduceTasks(4);

• 如果数据分布不均匀，就有可能在 reduce 阶段产生数据倾斜。

• 注意： reducetask 数量并不是任意设置，还要考虑业务逻辑需求，有些情况下，需要计算全局汇总结果，就只能有 1 个 reducetask。

落红不是无情物， 化作春泥更护花。

- - - - - - - - - - - - - - - - - - - - - - - - - - - -

＾ 至此，Reducetask并行度机制完成。

- - - - - - - - - - - - - - - - - - - - - - - - - - - -

※ 世间诱惑何其多，坚定始终不动摇。

SELECT语句进行查询时，如果要列出所查表中的所有列，则简便方法是将列名表用________表示。

…
*

落红不是无情物， 化作春泥更护花。

- - - - - - - - - - - - - - - - - - - - - - - - - - - -

注：CSDN手机端暂不支持章节内链跳转，但外链可用，更好体验还请上电脑端。

我知道我的不足，我也知道你的挑剔，但我就是我，不一样的烟火，谢谢你的指指点点，造就了我的点点滴滴：）！

扫描二维码关注公众号，回复： 6542829 查看本文章

落红不是无情物， 化作春泥更护花。