再探spark之一(复习之前)

Scala的 练习https://blog.csdn.net/yewakui2253/article/details/80022403

没启动spark的话。

可以通过 sbin/start-all.sh 来启动spark

按crtl+c来终止任务,而不是ctrl+z

spark-shell --master spark://192.168.235.128:7077  连接到spark上

 spark-shell --master spark://192.168.235.128:7077 --total-executor-cores 3 调整任务用核的数量

spark-submit --master spark://192.168.235.128:7077 --class org.apache.spark.examples.SparkPi /export/servers/spark-2.1.0-bin-hadoop2.7/examples/jars/spark-examples_2.11-2.1.0.jar 100   用来运行spark-submit任务

猜你喜欢

转载自blog.csdn.net/yewakui2253/article/details/80324577