hadoop完全分布式集群模式搭建

hadoop完全分布式

微信添加好友:IT-Helper ,领取徐老师大数据视频及笔记资料

1.core-site.xml
[/soft/hadoop/etc/hadoop/core-site.xml]

<?xml version="1.0"?> fs.defaultFS hdfs://s101:8020/

2.hdfs-site.xml
[/soft/hadoop/etc/hadoop/hdfs-site.xml]

<?xml version="1.0"?> dfs.replication 3

3.mapred-site.xml
[/soft/hadoop/etc/hadoop/mapred-site.xml]

<?xml version="1.0"?> <?xml-stylesheet type="text/xsl" href="configuration.xsl"?> mapreduce.framework.name yarn

4.yarn-site.xml
[/soft/hadoop/etc/hadoop/yarn-site.xml]

<?xml version="1.0"?> yarn.resourcemanager.hostname s101

5.slaves
s102
s103
s104
s105

6.hadoop-env.sh
[/soft/hadoop/etc/hadoop/hadoop-env.sh]
export JAVA_HOME=/soft/jdk

7.分发
将s101节点配置信息同步到各节点

8.格式化(在主节点进行)
hadoop namenode -format

9.启动进程
$>start-all.sh

10.查看webui
http://s101:50070/ //namenode
http://s101:50090/ //2nn
http://s101:50075/ //datnode
http://s101:8088/ //资源管理器管理ui

免费下载大数据教学视频_徐老师[百度网盘]
下载地址,提取码:kpba

微信扫描下方二维码,回复“视频”,获取更多大数据视频资料与笔记
微信扫描二维码,关注回复“视频”免费领取徐老师大数据视频与笔记

猜你喜欢

转载自blog.csdn.net/weixin_39992139/article/details/89405530