安装zookeeper:
https://www.cnblogs.com/lsdb/p/7297731.html
http://chwshuang.iteye.com/blog/2037530
1 下载
选择.tar.gz文件下载,下载到/export/software
下载链接:http://archive.apache.org/dist/zookeeper/
2 安装
使用tar解压要安装的目录即可,以3.4.10版本为例
这里以解压到/export/servers,实际安装根据自己的想安装的目录修改(注意如果修改,那后边的命令和配置文件中的路径都要相应修改)
tar -zxf zookeeper-3.4.10.tar.gz -C /export/servers
或者直接图形界面解压(提取)
3 配置
在解压后的主目录下创建data和logs两个目录用于存储数据和日志:
cd /export/servers/zookeeper-3.4.10
mkdir data mkdir logs
3.1 conf/zoo.cfg文件修改
三个zookeeper的conf/zoo.cfg修改如下:
tickTime=2000
dataDir=/usr/myapp/zookeeper-3.4.5/data
dataLogDir=/usr/myapp/zookeeper-3.4.5/logs
clientPort=2181
initLimit=5
syncLimit=2
server.1=192.168.220.139:2888:3888
server.2=192.168.220.140:2888:3888
server.3=192.168.220.141:2888:3888
对于hadoop02和hdoop03,由于安装目录都是zookeeper-3.4.10所以dataDir和dataLogDir不需要改变,又由于在不同机器上所以clientPort也不需要改变
所以此时hadoop02和hadoop03的conf/zoo.cfg的内容与hadoop01一样即可。
3.2 data/myid文件修改
(其实就是新建一个myid文件,内容分别是1,2,3. 可以图形化界面直接搞)
hadoop01 data/myid修改如下:
echo '1' > data/myid
hadoop02 data/myid修改如下:
echo '2' > data/myid
hadoop03 data/myid修改如下:
echo '3' > data/myid
4 启动验证
在从hadoop03、hadoop02,hadoop01,进入bin目录依次执行./zkServer.sh start 来启动 zookeeper,所有服务器启动完成后,就可以通过zkServer.sh status来查看服务器状态。没有报错说明都正常了。输入jps可以看到服务器中多了一个QuorumPeerMain服务。
配置环境变量:
(配好环境变量就不需要进入目录再./zkServer.sh start了,
随便哪个目录都可以输入zkServer.sh start,直接执行)
#set zookeeper env
export ZOOKEEPER_HOME=/export/servers/zookeeper-3.4.10
export PATH=$PATH:$ZOOKEEPER_HOME/bin:$ZOOKEEPER_HOME/conf
安装hbase:(失败了,只安装了单节点)
参考:
https://www.imooc.com/article/25594?block_id=tuijian_wz
http://lib.csdn.net/article/hbase/42763
1.下载
hbase-...-bin.tar.gz
2.解压
3.配置
3.1 hbase-site.xml
hbase-1.2.7/conf/hbase-site.xml,文末修改<configuration>
<configuration>
<property>
<name>hbase.rootdir</name>
<value>hdfs://hadoop01:9000/hbase</value>
<description>区域服务器使用存储HBase数据库数据的目录,服务器名称不能填IP,不然会报错</description>
</property>
<property>
<name>hbase.cluster.distributed</name>
<value>true</value>
<description>指定HBase运行的模式: false: 单机模式或者为分布式模式 true: 全分布模式 </description>
</property>
<property>
<name>hbase.zookeeper.quorum</name>
<value>hadoop01,hadoop02,hadoop03</value>
<description>ZooKeeper集群服务器的位置</description>
</property>
</configuration>
3.2 配置数据服务器地址
hbase-1.2.7/conf/regionservers
3.3 hbase-env.sh 配置
hbase-1.2.7/conf/hbase-env.sh
打开注释 export HBASE_MANAGES_ZK=false,修改true为false。意思是使用外部的Zeekeeper。
注释掉这两行:
export HBASE_MASTER_OPTS="$HBASE_MASTER_OPTS -XX:PermSize=128m -XX:MaxPermSize=128m -XX:ReservedCodeCacheSize=256m"
export HBASE_REGIONSERVER_OPTS="$HBASE_REGIONSERVER_OPTS -XX:PermSize=128m -XX:MaxPermSize=128m -XX:ReservedCodeCacheSize=256m"
此外,还需要打开注释 export JAVA_HOME=/export/servers/jdk/
还有:
export HBASE_LOG_DIR=/export/servers/hbase-1.2.7/logs
export HBASE_PID_DIR=/export/servers/hbase-1.2.7/pids
还有配置环境变量: /etc/profile
#set hbase env
export HBASE_HOME=/export/servers/hbase-1.2.7
export PATH=$PATH:$HBASE_HOME/bin:$HBASE_HOME/conf
4 复制HBase目录到另两个节点
在hadoop01的hbase-1.2.7所在目录打开终端,使用以下命令进行复制:
scp -r hbase-1.2.7 hadoop02:/export/servers/
scp -r hbase-1.2.7 hadoop03:/export/servers/
5 启动,验证
拷贝完成后,在hadoop01的hbase下bin目录启动:./start-hbase.sh;
启动完成后,myhadoop1上使用jps命令可以看到多了一个HMaster服务,在子节点输入jps可以看到多了一个HRegionServer服务; 登录HBase可以使用hbase shell命令登录HBase,输入status查看当前状态。输入exit退出HBase服务。
如果提示:hadoop02: Java HotSpot(TM) 64-Bit Server VM warning: ignoring option PermSize=128m; support was removed in 8.0
就是jdk8.0不支持了什么的,修改hbase-env.sh
注释掉export HBASE_MASTER_OPTS="$HBASE_MASTER_OPTS -XX:PermSize=128m -XX:MaxPermSize=128m -XX:ReservedCodeCacheSize=256m"
export HBASE_REGIONSERVER_OPTS="$HBASE_REGIONSERVER_OPTS -XX:PermSize=128m -XX:MaxPermSize=128m -XX:ReservedCodeCacheSize=256m"就好
如果提示:regionserver running as process 4664. Stop it first.
这个进程没关,进入对应的虚拟机,jps命令,关掉HRegionServer。 kill -9 进程号
如何关闭进程:https://my.oschina.net/u/2338224/blog/1581495
hbase单节点安装:(成功)
1.下载
2.解压
3.配置
hbase-site.xml (在这里,本地文件系统file只要换成hdfs文件系统就会报错,无法搭建集群。)
hbase-env.sh
export JAVA_HOME=/export/servers/jdk
注释掉这两行:
export HBASE_MASTER_OPTS="$HBASE_MASTER_OPTS -XX:PermSize=128m -XX:MaxPermSize=128m -XX:ReservedCodeCacheSize=256m"
export HBASE_REGIONSERVER_OPTS="$HBASE_REGIONSERVER_OPTS -XX:PermSize=128m -XX:MaxPermSize=128m -XX:ReservedCodeCacheSize=256m"
还有环境变量: /etc/profile
#set hbase env
export HBASE_HOME=/export/servers/hbase-1.2.7
export PATH=$PATH:$HBASE_HOME/bin:$HBASE_HOME/conf