SPARKのパーティ

パーティションが所属してシャッフルプロセスを通じて各データ、レンジハッシュ・パーティションおよびパーティションをサポートし、ユーザはまた、パーティションをカスタマイズすることができ、ハッシュ・パーティションの現在のデフォルトのパーティション、スパークパーティションは直接パーティションRDD、RDDの数を決定し、現在スパークの数を減らします

  • 唯一のキー値RDDのタイプは、パーティショナ値RDDパーティショナタイプ非キー値はNoneですしています

  • 各範囲のRDDパーティションID:0〜numPartitions-1は、この値は、パーティションに所属することを決めています

おすすめ

転載: www.cnblogs.com/xiangyuguan/p/11456801.html