ビッグデータシリーズ（2）HDFS書き込みプロセスと読み取りプロセス

その他 2020-04-15 22:56:09 訪問数: null

2つの問題

  • データブロックは通常128Mに設定されています
  • 今日のNameNodeには、今日の単一点問題を解決する2つのノードがあります

HDFS書き込みプロセス

  • クライアントがNameNodeへのデータ書き込み要求を開始します
  • ブロックでDataNodeノードに書き込むと、DataNodeはコピーバックアップを自動的に完了します
  • DataNodeはストレージが完了したことをNameNodeに報告し、NameNodeはクライアントに通知します
    ここに画像の説明を挿入
    ここに画像の説明を挿入

HDFS読み取りプロセス

  • クライアントがNameNodeへのデータ読み取り要求を開始します
  • NameNodeは最も近いDataNodeノード情報を見つけます
  • クライアントがDataNodeからファイルを分割してダウンロードします
    ここに画像の説明を挿入
GitCloud
元の記事を35件公開 ・ 3を獲得 ・ 3300を表示
プライベートの手紙の 懸念

おすすめ

転載: blog.csdn.net/qq_43430261/article/details/105529431
おすすめ
Face Wall Intelligence が Eurux-8x22B オープンソース大型モデルをリリース - 「科学のチャンピオン」と呼ぶにふさわしいモデル
Kaiyuan Daily | Google は、Hongmeng のオープンソース Android 携帯電話を Docker がサポート、オープンプラットフォームを閉鎖。
ランキング
Swiper を使用する際の落とし穴、どの落とし穴に陥りましたか?
データ構造基盤のリンクリスト（1）
Vue3 は Excel のアップロードと JSON データへの解析を実装し、自動ダウンロード用の JSON ファイルを生成します。
LG4721 [テンプレート]パーティションFFT
C ++のコンストラクタとデストラクタの実行順序
c3新特性多列
ライブラリのリソース
Unityエディタの拡張機能? PropertyDrawerとは何ですか? カスタムスクリプト変数のプロット?
2つのノード間のパスを見つけるのNeo4j
Linuxのnginxのを使用してCDNサーバの設定を行います
アーカイブ
もっと
2024-05-06(6)
2024-05-05(0)
2024-05-04(18)
2024-05-03(8)
2024-05-02(0)
2024-05-01(4)
2024-04-30(35)
2024-04-29(5)
2024-04-28(12)
2024-04-27(29)

コードワールド

© 2018 codetd.com