大数据学习之路88-将jar包提交到spark集群需要注意的

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/qq_37050372/article/details/82952711

我们可以将上一节将数据写入MySql的程序用maven将程序打包,然后将jar包提交到spark集群。

执行语句如下:

我们可以看到这里指定了两次mysql的连接驱动,这是为什么呢?

因为Driver端获取数据库中的元数据信息的时候需要连接驱动,executor真正执行的时候也需要和数据库打交道,也需要数据库的连接驱动。

猜你喜欢

转载自blog.csdn.net/qq_37050372/article/details/82952711