centos安装spark

先去下载spark:https://mirrors.cnnic.cn/apache/,和scala:https://www.scala-lang.org/download/,因为 spark使用scala开发,要先安装scala。

解压到/home/ yexin/  tar -zxvf filename  然后重命名


在/etc/profile里面配置,然后source /etc/profile


输入pyspark 既可以启动

但是默认使用自带的老版本的python,可修改

vim spark/bin/pyspark

修改成自己的python3,安装python3见https://blog.csdn.net/qq_25948717/article/details/80310458


再输入pyspark既可以重新启动,发现在使用python3



猜你喜欢

转载自blog.csdn.net/qq_25948717/article/details/80758713