前置条件
- kylo-0.8.3.deb(待安装)
- activemq 5.15(待安装,需要预先下载,并放在/opt/kylo/setup/activemq)
- elasticsearch 5.5.0(待安装,需要预先下载,并放在/opt/kylo/setup/elasticsearch)
- ubuntu 14.04(已安装)
- jdk 8(已安装)
- mysql 5.6(已安装)
- HDP 2.6(已安装)
- HDF 3.0.1.0(包含nifi1.2)(已安装)
- cd /opt/kylo/setup
- 只安装activemq和elasticsearch,不安装nifi,使用HDF里的nifi
安装脚本修改
说明: 如果不修改脚本,会遇到报错,选项与结果不一致等问题.
1. activemq/install-activemq.sh
1.1. 18行修改为: install-activemq.sh
1.2. 29行修改为: #KYLO_SETUP_FOLDER=$5
2. elasticsearch/install-elasticsearch.sh
2.1. 27行修改为: #SETUP_FOLDER=$1
2.2. 66行后插入下面2行:
2.2.1. echo "Please enter the database port";
2.2.2. read -p "> " port;
3. setup-wizard.sh
3.1. 80行填加-P端口参数: ! mysql -h ${hostname} -P ${port} ......
开始安装
1.sh setup-wizard.sh -o
2.按照提示一直往下走
3.遇到"Please choose an option to configure Java for Kylo, ActiveMQ, and NiFi"的时候,选择3,填入已安装的JAVA_HOME的路径
4.安装activemq,elasticsearch,不安装nifi
5.修改 "../kylo-services/conf/application.properties"
5.1.修改spring.datasource配置:
5.1.1.将 spring.datasource.* 修改为你的mysql的配置
5.2.修改hive配置:
5.2.1.将 hive.datasource.* 修改为你的hive的配置
5.2.2.将 hive.metastore.datasource.* 修改为你的hive metastore的配置
5.2.3.将 nifi.rest.* 修改为你的nifi的配置
5.2.4.将 nifi.service.* 修改为你的kylo的mysql的配置
5.2.5.将 nifi.executesparkjob.* 修改为你的spark的配置
6.创建kylo相关的表
6.1.sh sql/generate-update-sql.sh
6.2.由于这里使用的是mysql5.6,sql脚本可能会报错,按照提示简单修改即可.
6.3.mysql -h${host} -P${port} -u${user} -p${pwd} -Dkylo < sql/kylo-db-update-script.sql
7.启动kylo
7.1. sh start-kylo-apps.sh
大功告成,如果还有问题,请根据日志排查
- /var/log/kylo-services/kylo-serviecs.log
- /var/log/kylo-ui/kylo-ui.log
