Hadoop 2.7.6 上安装 hive 2.3.0

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/u012292754/article/details/82314983

1 安装配置mysql

安装mysql

2 hive2.3.0 下载

hive2.3.0下载

3 解压

这里写图片描述
将文件夹名字改为 hive

4 配置环境变量

/etc/profile

export HIVE_HOME=/home/hadoop/apps/hive
export PATH=$PATH:$HIVE_HOME/bin

命令行输入 source /etc/profile

5 下载 jdbc connector

jdbc connector 下载
将它拷贝到 hive/lib
这里写图片描述

6 修改hive配置文件

6.1 复制初始化文件并重命名

目录切换到 /home/hadoop/apps/hive/conf

cp hive-env.sh.template hive-env.sh
cp hive-default.xml.template hive-site.xml
cp hive-log4j2.properties.template hive-log4j2.properties
cp hive-exec-log4j2.properties.template hive-exec-log4j2.properties

6.2 修改 hive-env.sh 文件

export JAVA_HOME=/usr/apps/jdk1.8.0_181-amd64
export HADOOP_HOME=/home/hadoop/apps/hadoop-2.7.6
export HIVE_HOME=/home/hadoop/apps/hive
export HIVE_CONF_DIR=/home/hadoop/apps/hive/conf

6.3 在hdfs中创建目录,并授权,用于存储文件

启动hadoop

hdfs dfs -mkdir -p /user/hive/warehouse
hdfs dfs -mkdir -p /user/hive/tmp
hdfs dfs -mkdir -p /user/hive/log
hdfs dfs -chmod -R 777 /user/hive/warehouse
hdfs dfs -chmod -R 777 /user/hive/tmp
hdfs dfs -chmod -R 777 /user/hive/log

hdfs dfs -chmod -R 777 /user

6.4 修改hive-site.xml

<property>
    <name>hive.exec.scratchdir</name>
    <value>/user/hive/tmp</value>
</property>

<property>
    <name>hive.metastore.warehouse.dir</name>
    <value>/user/hive/warehouse</value>
</property>
<property>
    <name>hive.querylog.location</name>
    <value>/user/hive/log</value>
</property>
<property>
    <name>javax.jdo.option.ConnectionURL</name>
    <value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true&amp;characterEncoding=UTF-8&amp;useSSL=false</value>
  </property>
<property>
    <name>javax.jdo.option.ConnectionDriverName</name>
    <value>com.mysql.jdbc.Driver</value>
</property>
<property>
    <name>javax.jdo.option.ConnectionUserName</name>
    <value>root</value>
  </property>
<property>
    <name>javax.jdo.option.ConnectionPassword</name>
    <value>root</value>
  </property>

创建 tmp 文件夹 ,并修改权限
mkdir -p /home/hadoop/apps/hive/tmp
chmod -R 777 /home/hadoop/apps/hive/tmp

  • 将hive-site.xml文件中的${system:java.io.tmpdir}替换为hive的临时目录 /home/hadoop/apps/hive/tmp
  • 把 {system:user.name} 改成 {user.name}

7 初始化 hive

schematool -dbType mysql -initSchema
发现包冲突
这里写图片描述
删掉 /hive/lib 目录下 这个 jar 包
然后删掉hive 数据库,重新运行初始化命令
这里写图片描述

8 启动 hive

8.1 方式一

命令行直接输入 hive
这里写图片描述

8.2 方式二,使用 beeline

必须先对hadoop的core-site.xml进行配置,在文件里面添加并保存

<property>
  <name>hadoop.proxyuser.hadoop.groups</name>
  <value>*</value>
</property>
<property>
  <name>hadoop.proxyuser.hadoop.hosts</name>
  <value>*</value>
</property>

先启动 hiveserver2
这里写图片描述
这里写图片描述

猜你喜欢

转载自blog.csdn.net/u012292754/article/details/82314983