最近在装DBus,因为很多软件都是CDH不存在的,所以需要知道CDH某些配置,才能安装大数据集群,这里贴出一些常用的命令:
关闭cloudera manager集群:
1.关闭集群服务
2.service cloudera-scm-agent hard_stop_confirmed
3.service cloudera-scm-server stop
启动cloudera manager集群:
1.service cloudera-scm-server start
2.service cloudera-scm-agent start
3.启动集群服务
启动Kafka:
nohup bin/kafka-server-start.sh config/server.properties &
启动KafkaManger->ProdServerStart进程:
/export/servers/kafka-manager-1.3.3.22/RUNNING_PID # 先删除已存才的PID文件
nohup bin/kafka-manager -Dhttp.port=7456 &
启动Storm:
nohup bin/storm nimbus &
nohup bin/storm supervisor &
nohup bin/storm ui &
nohup bin/storm logviewer &
nohup bin/storm drpc &
删除storm进程
kill -9 ps -ef | grep daemon.nimbus | awk '{print $2}' | head -n 1
kill -9 ps -ef | grep daemon.supervisor | awk '{print $2}' | head -n 1
kill -9 ps -ef | grep ui.core | awk '{print $2}' | head -n 1
kill -9 ps -ef | grep daemon.logviewer | awk '{print $2}' | head -n 1
kill -9 ps -ef | grep daemon.drcp | awk '{print $2}' | head -n 1
集群调优该懂的CDH配置:
- 所有在CDH软件执行命令 /opt/cloudera/parcels/CDH/bin/具体软件名/…
- 所有的CDH软件日志/var/log/软件名/…
- 所有的CDH软件配置文件 /etc/软件名/conf/…
- 所有的CDH软件jar包 /opt/cloudera/parcels/CDH/jars/…
/opt/cloudera/parcels/CDH/lib/软件名/…
对于这些常见的命令,该背还得背,否则运维很拖时间…