编译Spark2.X源码的心得和注意事项

我这是用make-distribution.sh这个命令编译的。也是我推荐使用的,因为可以直接产生一个tgz包,其他的节点可以直接使用。

建议打开make-distribution.sh,更改如下部分。

报错:

VERSION='ERROR: Cannot download zinc-0.3.9.tgz with cURL or wget; please install manually and try again.'

这个问题的解决是安装manually:sudo apt-get install manually.

还要注意一点就是你解压的spark.tgz一定要给最大的权限。否则编译的时候会报权限错误。

猜你喜欢

转载自blog.csdn.net/bigdata_mining/article/details/80821469