CDH集群添加新节点

1 阿里云购买服务器

 

 

 

1 hosts配置

2 ssh免密登录配置

3 jdk 安装

scp -r * hadoop004:/usr/java/ 

配置 /etc/profile

 

4 关闭防火墙 3台机器同时操作

 

systemctl stop firewalld.service

systemctl disable firewalld.service

 

  

 

5 httpd安装

    rpm -qa|grep httpd

 

 yum install -y httpd

 

systemctl list-unit-files | grep httpd

 

 systemctl enable httpd.service

 

systemctl start httpd

 

 

 

6 cp 下载CDH-manager的文件

 

scp * root@hadoop004:/var/www/html/parcels

scp -r cm root@hadoop004:/var/www/html

 

7 cp mysql驱动

mkdir /usr/share/java

scp /usr/share/java/mysql-connector-java.jar hadoop004:/usr/share/java

 

 

8 编辑yum源

  vi /etc/yum.repos.d/cloudera-manager.repo

 

[cloudera-manager]

name = Cloudera Manager, Version 5.16.1

baseurl = http://hadoop001/cm/5/

gpgcheck = 1

 

9 开始运行向导

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

之前配置的yum源本地不包含有些组件 被安装程序替换为新yum源

暂时中止进度，然后手动安装

 

yum provides '*/applydeltarpm'

    yum install deltarpm

 

然后再重试进程

 

 

 

正在获取安全锁问题

 

ps aux|grep scm_prepare_node|awk '{print $2}'|xargs kill -9

 

cd /tmp

ls -a

rm -rf scm_prepare_node.*

 

 

最后安装失败 卡在了yum源上面

 

手动安装 到对应的目录下，然后 删除锁定文件再重试

 

yum install /var/www/html/cm/5.16.1/RPMS/x86_64/cloudera-manager-daemons-5.16.1-1.cm5161.p0.1.el7.x86_64.rpm

 

 

后面下一步，下一步就ok了

 

单独添加 datanode节点

 

 

 

 

 

 

启动节点

 

 

 

添加nm

 

 

添加regionserver

 

 

 

 

 

resionserver 对应的PHONEIX依赖文件

 

每个节点都注意

scp /opt/cloudera/parcels/CDH/lib/hbase/lib/phoenix-4.14.1-cdh5.16.1-server.jar bd11.getngo.com:/opt/cloudera/parcels/CDH/lib/hbase/lib/

 

 

然后，重新部署配置，启动新添加的节点，完成部署