为什么执行spark任务会在hadoop历史服务器上看到,而在spark8080端口页面和work文件夹下面看不到?

通过oozie任务调度工具执行一个spark任务:

spark程序:


oozie任务:


程序成功执行了,但在8080端口页面看不到,在hadoop 19888历史服务器页面可以看到


这是怎么回事?

将上面那个spark程序打成jar包使用spark-sumbit --class 主类 .jar 提交可以在8080页面显示任务

猜你喜欢

转载自blog.csdn.net/weixin_40998204/article/details/80492638
今日推荐