集群搭建-----HDFS伪分布式搭建步骤（手把手教学）

版权声明： https://blog.csdn.net/power_k/article/details/91572131

## 配置免密登录
配置免密登录 node01->node01
ssh-keygen -t rsa
ssh-copy-id -i ~/.ssh/id_rsa.pub root@node01

1、上传文件
ftp
安装yum install lrzsz -y

使用命令rz

上传文件 jdk hadoop
2、解压
linux创建一个专门的安装包
mkdir /opt/***
为了方便以后查看
tar -zxvf jdk

3、配置环境变量
vi /etc/profile
添加
export JAVA_HOME=/opt/software/jdk1.8.0_121
export PATH= $PATH:$JAVA_HOME/bin
source /etc/profile-----让环境变量生效
注：
用户变量 .bashrc
系统变量 /etc/profile
3、上传hadoop包
tar -zxvf hadoop-2.6.5.tar.gz

4、配置信息
bin—系统的操作命令（文件的增删改查）
sbin–系统的管理命令（集群的启动、关闭）
etc/hadoop—配置信息
1、slaves—节点（DN）

	2、hdfs-site.xml
	<property>
		<name>dfs.replication</name>     //设置备份个数
		<value>1</value>
	</property>
	<property>     
		<name>dfs.namenode.secondary.http-address</name>   //secondaryNamenode
		<value>node01:50090</value>
	</property>
	
	3、core-site.xml
	
	<property>
		<name>fs.defaultFS</name>            //namenode
		<value>hdfs://node01:9000</value>    
	</property>
	<property>
		<name>hadoop.tmp.dir</name>          //namenode启动后产生的信息
		<value>/var/abc/hadoop/local</value>
	</property>
	
	4、把*-env.sh的文件内部所有的java路径改为绝对路径
回去java_home路径去拿，依赖于jdk,
有可能找不到java路径，直接设成绝对路径

5、格式化
cd /opt/software/hadoop-2.6.5/bin/
./hdfs namenode -format-----让所有文件生效
6、启动命令
cd /opt/software(自己创建的安装包的文件)/hadoop/sbin
./start-dfs.sh
jps查看进程

7、配置hadoop的环境变量
vi /etc/profile
添加
export HADOOP_HOME=/opt/software/hadoop-2.6.5
export PATH= $PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin