自编译Apache Spark2.3.3支持CDH5.16.1

1 下载源代码文件

https://archive.apache.org/dist/spark/spark-2.3.3/

2 解压后导入编辑器,修改依赖的Hadoop版本,下面截图是修改后的,要看自己集成的CDH版本

  

3 然后编译,一开始要等一会儿,

 4 编译成功后,copy出编译好的tar包,然后部署

  

猜你喜欢

转载自www.cnblogs.com/QuestionsZhang/p/10664278.html
今日推荐