jupyter Notebook中集成pyspark

1、修改/etc/profile文件

命令:sudo vi /etc/profile  添加如下设置

########spark ipython notebook############
export PYSPARK_DRIVER_PYTHON=ipython
export PYSPARK_DRIVER_PYTHON_OPTS="notebook"

2、打开shell 输入pyspark即可自动打开notebook

3、jupyter运行界面

友情提示:shell中进入的路径决定你的列表中显示的文件,如果想直接显示已经创建好的note直接进入到该文件夹中再运行pyspark命令即可。

  

猜你喜欢

转载自www.cnblogs.com/giserpan/p/9248416.html