大数据系列(2)HDFS写流程和读流程

两个问题

  • 数据块一般设置为128M
  • 如今的NameNode有两个节点,解决了如今的单点问题

HDFS写流程

  • 客户端向NameNode发起写数据请求
  • 分块写入DataNode节点,DataNode自动完成副本备份
  • DataNode向NameNode汇报存储完成,NameNode通知客户端
    在这里插入图片描述
    在这里插入图片描述

HDFS读流程

  • 客户端向NameNode发起读数据请求
  • NameNode找出距离最近的DataNode节点信息
  • 客户端从DataNode分块下载文件
    在这里插入图片描述
发布了35 篇原创文章 · 获赞 3 · 访问量 3300

猜你喜欢

转载自blog.csdn.net/qq_43430261/article/details/105529431