Spark常用算子汇总（转载）

spark RDD算子（一） parallelize，makeRDD，textFile

spark RDD算子（二） filter,map ,flatMap

spark RDD算子（三） distinct，union，intersection，subtract，cartesian

spark RDD算子（四）之创建键值对RDD mapToPair flatMapToPair

spark RDD算子（五）之键值对聚合操作 combineByKey

spark RDD算子（六）之键值对聚合操作reduceByKey，foldByKey，排序操作sortByKey

spark RDD算子（七）之键值对分组操作 groupByKey，cogroup

spark RDD算子（八）之键值对关联操作 subtractByKey, join, rightOuterJoin, leftOuterJoin

spark RDD算子（九）之基本的Action操作 first, take, collect, count, countByValue, reduce, aggregate, fold,top

spark RDD算子（十）之PairRDD的Action操作countByKey, collectAsMap

spark RDD算子（十一）之RDD Action 保存操作saveAsTextFile,saveAsSequenceFile,saveAsObjectFile,saveAsHadoopFile 等

扫描二维码关注公众号，回复： 4975569 查看本文章

spark RDD算子（十二）之RDD 分区操作上mapPartitions, mapPartitionsWithIndex

spark RDD算子（十三）之RDD 分区 HashPartitioner，RangePartitioner，自定义分区

作者：翟开顺
原文：https://blog.csdn.net/T1DMzks/article/details/72077428