Sqoop从Mysql全量定时导入Hive

脚本内容:(sqoop.sh)

#!/bin/sh
sqoop import  \
--connect jdbc:mysql://localhost:3306/mysql  \
--username root  \
--password 111111  \
--table help_topic  \
--fields-terminated-by "\t"  \
--lines-terminated-by "\n"  \
--hive-import  \
--hive-overwrite  \
--delete-target-dir \
--hive-database  test \
--hive-table keyword

注意:

我们的task.sh还不是可执行文件,通过ls -l命令我们可以看到

-rw-r--r--   1 root root   300 6月  25 12:19 sqoop.sh

所以我们需要通过chmod命令来修改task.sh的权限:

[root@ycx02 ~]# chmod 744 sqoop.sh 

此时再查看,就发现task.sh已经是可执行文件了:

-rwxr--r--   1 root root   300 6月  25 12:19 sqoop.sh

设置定时器:

[root@ycx02 ~]# crontab -e
49 13 * * *  /root/sqoop.sh

Sqoop定时导入博客


猜你喜欢

转载自blog.csdn.net/qq_41851454/article/details/80800907
今日推荐