spark提交任务事例

spark-submit \
 --class org.apache.spark.examples.SparkPi \
 --master spark://xinhuo145:7077 \
 --executor-memory 500m \
 --total-executor-cores 1 \
 /opt/ZDH/parcels/lib/spark/examples/jars/spark-examples_2.11-2.4.4-zdh9.8.1.jar \
 100

其中注意要用有执行权限的用户 ,还有spark-examples_2.11-2.4.4-zdh9.8.1.jar版本号

执行结果:

发布了189 篇原创文章 · 获赞 86 · 访问量 8万+

猜你喜欢

转载自blog.csdn.net/seulzz/article/details/103652250