单机伪分布集群搭建

单机伪分布:用一个节点模拟集群
好处:方便测试,开发,占用资源小
搭建方法:
第一步:修改slaves文件,将master(主机名)写入文件中。
第二步:修改hdfs-site.xml文件,将文件的副本数改成1(副本数小于等于节点数)。

<property>
        <name>replication</name>
        <value>1</value>
</property>


-----------
格式化之前将/tmp/hadoop-root删除,(如果自己配置的自己找到data name进行删除,如果没有直接删除Hadoop-root)
rm -rf /tmp/hadoop-root
第三步:格式化  Hadoop namenode –format
第四步:启动  start-dfs.sh
第五步:测试-上传文件到Hadoop集群
hadoop fs -put /将要上传的文件  /集群的文件目录

如果上传文件或者创建目录,出现在安全模式状态,

可以等待其自动退出安全模式,也可以使用手动命令来离开安全模式: 
hadoop dfsadmin -safemode leave 

猜你喜欢

转载自blog.csdn.net/qq_38617531/article/details/82974021
今日推荐