修改Spark的日志级别

版权声明:版权声明:本文为博主原创文章,转载请附上博文链接! https://blog.csdn.net/qq_42246689/article/details/86062910

7、修改Spark的日志级别

7.1、永久修改 

从我们运行的 spark 程序运行的情况来看,可以看到大量的 INFO 级别的日志信息。淹没了 我们需要运行输出结果。可以通过修改 Spark 配置文件来 Spark 日志级别。 

以下是详细步骤: 

第一步:先进入 conf 目录

[hadoop@hadoop05 conf]$ cd $SPARK_HOME/conf 
 
第二步:准备 log4j.properties

[hadoop@hadoop05 conf]$ cp log4j.properties.template log4j.properties 
 
第三步:配置日志级别:

把 INFO 改成你想要的级别:主要有 ERROR, WARN, INFO, DEBUG 几种 

猜你喜欢

转载自blog.csdn.net/qq_42246689/article/details/86062910