centos hadoop 伪分布

centos hadoop 伪分布
修改配置文件
1. hadoop-env.sh :JAVA_HOME
2. core-site.sh :
<configuration>
    <property>
        <name>fs.default.name</name>
        <value>hdfs://localhost:9000</value>
    </property>
    <property>
        <name>hadoop.tmp.dir</name>
        <value>file:/simple/hadoop/tmp</value>
    </property>
</configuration>
3.hdfs-site.xml
<configuration>
<property>
        <name>dfs.replication</name>
        <value>1</value>
</property>
<property>
        <name>dfs.namenode.name.dir</name>
        <value>file:/simple/hadoop/tmp/dfs/name</value>
</property>
<property>
        <name>dfs.datanode.data.dir</name>
        <value>file:/simple/hadoop/tmp/dfs/data</value>
</property>
</configuration>
4.mapred-site.xml
<configuration>
 <property>
      <name>mapreduce.framework.name</name>
      <value>yarn</value>
 </property>
 <property>
      <name>yarn.app.mapreduce.am.staging-dir</name>
      <value>/simple/hadoop/staging</value>
 </property>
</configuration>
5.yarn-site.xml
<configuration>
        <property>
                <name>yarn.nodemanager.aux-services</name>
                <value>mapreduce_shuffle</value>
        </property>
        <property>
                <name>yarn.resourcemanager.hostname</name>
                <value>localhost</value>
        </property>
</configuration>
 

切换root用户
进入$HADOOP_HOME/bin
hdfs namenode -format 搭建完成后执行一次

start-all.sh

jps 查看进程 共六个:
16944 ResourceManager
16801 SecondaryNameNode
16613 DataNode
17079 NodeManager
17389 Jps
16526 NameNode


浏览器输入
http://localhost:50070/

如果能够查看信息说明Hadoop安装成功了

发布了51 篇原创文章 · 获赞 6 · 访问量 4751

猜你喜欢

转载自blog.csdn.net/weixin_42191996/article/details/88743111
今日推荐