1.1说明
CDH机器添加分三种方式
- 页面向导添加(最好离线)
- 软件包手动安装
- 原始码手动安装
第一种方式最简单,添加的节点会去主机下载安装包,但是在公网上ip反向解析域名,经常出错,离线会好点
第三种方式原始码安装需要自己指定管理目录
推荐第三种方式,会自动添加对应的服务,目录自动建立
这里分享第二种方式,软件包安装方法
1.2安装部署
-
主机名、ip等修改好,关闭防火墙,ssh免密码登录不是必须的
-
首先到http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/选择对应的版本,主要参考已有集群的agent的版本,进行选择,安装agent
-
下载对应版本的rpm包,如5.3.1版本的
cloudera-manager-daemons-5.3.1-1.cm531.p0.191.el6.x86_64.rpm
cloudera-manager-agent-5.3.1-1.cm531.p0.191.el6.x86_64.rpm
jdk-6u31-linux-amd64.rpm
- 安装jdk,最好与原有集群jdk版本保持一致
- 安装daemons、agent,rpm包
- 修改config 中server_host
vim etc/cloudera-scm-agent/config.ini 设置server_host为scm机器
- 启动agent
/etc/init.d/cloudera-scm-agent start
一、如启动错误,请查看scm安装路径下log文件夹下cloudera-scm-agent/cloudera-scm-agent.out
8) 这时打开scm web管理页面,点击最上面导航 主机 选项即可看到新增加的节点
9) 点击上面的 向集群添加新主机 即可添加,共5步
a) 由于已经将cm agent拷贝到各机器并启动了,此处不是通过IP或hostname查找的(即使查出来也无法选择),而是已存在的主机里面选择,选择新加的agent,点继续
b) 出现下载parcel的界面,此处多多注意不同linux版本要不同的parcel包
c) 检查主机正确性
d) 检查主机正确性
e) 选择主机模板-此处可选择要安装的组件
f) 完成
https://blog.csdn.net/xleyou/article/details/2579285
如果出现错误
ImportError: No module named site
或者
可以看看是不是系统默认的python 有改动
#修改
vim /opt/cloudera/cm-agent/bin/python
将python链接改为系统原python链接