Big data series (2) Proceso de escritura HDFS y proceso de lectura

Dos problemas

  • El bloque de datos generalmente se establece en 128M
  • El NameNode de hoy tiene dos nodos que resuelven el problema de un solo punto de hoy

Proceso de escritura HDFS

  • El cliente inicia una solicitud de escritura de datos al NameNode
  • Escriba en el nodo DataNode en bloques, y DataNode completa automáticamente la copia de respaldo
  • El DataNode informa al NameNode que el almacenamiento está completo, y el NameNode informa al cliente
    Inserte la descripción de la imagen aquí
    Inserte la descripción de la imagen aquí

Proceso de lectura HDFS

  • El cliente inicia una solicitud de lectura de datos al NameNode
  • NameNode encuentra la información del nodo DataNode más cercana
  • El cliente descarga archivos en fragmentos del DataNode
    Inserte la descripción de la imagen aquí
Publicado 35 artículos originales · ganó 3 · vistas 3300

Supongo que te gusta

Origin blog.csdn.net/qq_43430261/article/details/105529431
Recomendado
Clasificación