sparkStreaming转换算子

map

代码--》集群

nc--》端口 9000

替换  字

 

flatmap 切分压平

filter 

repartition

union合并  【local【2】】 当只有两个的时候  只有一个分区  另一个处理数据集

count

reduce

************************

join

用两个队列join

cogroup

 

 

猜你喜欢

转载自www.cnblogs.com/JBLi/p/11363572.html
0条评论
添加一条新回复
  
今日推荐