Sqoop のインストールと展開のチュートリアル

スクープの設置

注: Sqoop をインストールする前に、ローカル Java 環境と Hadoop 環境を構成します。

まず、Spoop インストール パッケージ sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz をシステム ディレクトリの /root/softwares にコピーします。

構成環境変数を解凍します。

# 解压tar.gz包
[root@qianfeng01 local] tar -zxvf /root/sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /usr/local/

#把Sqoop的安装路径修改为sqoop-1.4.7,方便以后配置和调用
[root@qianfeng01 local]# mv  sqoop-1.4.7.bin__hadoop-2.6.0 sqoop-1.4.7
[root@qianfeng01 sqoop-1.4.7]# vi /etc/profile
# 追加内容如下:

export SQOOP_HOME=/usr/local/sqoop-1.4.7
export PATH=$PATH:$SQOOP_HOME/bin

新しい設定ファイル

[root@qianfeng01 sqoop-1.4.7] mv ./conf/sqoop-env-template.sh ./conf/sqoop-env.sh

設定ファイルを変更する

設定ファイル:

[root@qianfeng01 sqoop-1.4.7]  vi ./conf/sqoop-env.sh

このシステムに実際にインストールされている Hadoop シリーズのディレクトリに応じて、次のパスを構成します。

export HADOOP_COMMON_HOME=/usr/local/hadoop-3.2.1
export HADOOP_MAPRED_HOME=/usr/local/hadoop-3.2.1
export HIVE_HOME=/usr/local/hive-3.1.2
export ZOOCFGDIR=/usr/local/zookeeper-3.6.2

MySqlドライバーをコピーする

sqoop/libMySql と HDFS が JDBC 経由でデータをインポートおよびエクスポートできるようになったので、次のように、まず JDBC ドライバー パッケージをパスにコピーする必要があります。

[root@qianfeng01 sqoop-1.4.7] cp /root/mysql-connector-java-5.1.18.jar ./lib/

インストールを確認する

#查看Sqoop的版本
[root@qianfeng01 sqoop-1.4.7] sqoop version