並べ替えによって、和クラスターによってによってハイブ中順番配布

常に言う:
一般一見、これらの4つのハイブの役割の一種であり、に集まり、しかし、彼らはMRの実装で開始が異なっていました。

詳細に入る:
順:

すべてのデータは、世界的に注文して順番を与えている、と減速の仕事を「ウェイクアップ」します。のような、愚か者のようにどのくらいのデータのみに対処するための減速を開始していない問題です。したがって、小さくできるデータの量が、データの量一度にも、非常に困難になることにより、大量注文になり、「ストライキ。」

並び替え:

地元のソートでソートします。怠惰な混乱したことにより比較順序は、ソートちょうど反対で、それだけではない非常に勤勉で、予備の機能を持っています。仕事へのサイズ低減によるデータ量の複数でソートし始め、それが軽減入る前に各減速機のソートのファイルを生成します。利点は、総合ランキングの効率を改善することです。

で配布します:

関数により分配することである:結果の制御マップ分布によって配布、それは処理ノードを低減するために同一の電界分布マップ出力を有することになります。すなわち、特定の状況下で、我々は、この操作は、通常発生する可能性があり、その後の操作の準備のために収集され、減速機に特定の行を制御する必要があります。

https://blog.csdn.net/qq_40795214/article/details/82190827

おすすめ

転載: www.cnblogs.com/gouhaiping/p/12652983.html