La configuración y el inicio jobhistory parada Hadoop

La configuración y el inicio jobhistory parada Hadoop

Configuración jobhistory

  1. Añadir en el hilo site.xml
<!-- 开启日志聚合 -->
<property>
	<name>yarn.log-aggregation-enable</name>
	<value>true</value>
</property>
  1. Añadir mapred-site.xml en
<!-- 设置jobhistoryserver 没有配置的话 history入口不可用 -->
<property>
    <name>mapreduce.jobhistory.address</name>
    <value>localhost:10020</value>
</property>

<!-- 配置web端口 -->
<property>
    <name>mapreduce.jobhistory.webapp.address</name>
    <value>localhost:19888</value>
</property>

<!-- 配置正在运行中的日志在hdfs上的存放路径 -->
<property>
    <name>mapreduce.jobhistory.intermediate-done-dir</name>
    <value>/history/done_intermediate</value>
</property>

<!-- 配置运行过的日志存放在hdfs上的存放路径 -->
<property>
    <name>mapreduce.jobhistory.done-dir</name>
    <value>/history/done</value>
</property>
  1. de inicio y parada jobhistory

Inicio: realizado en hadoop / sbin /

./mr-jobhistory-daemon.sh start historyserver
或者
mapred --daemon start historyserver

Stop: para llevar a cabo en hadoop / sbin /

./mr-jobhistory-daemon.sh stop historyserver
或者
mapred --daemon stop historyserver
Publicados 175 artículos originales · ganado elogios 76 · Vistas de 230.000 +

Supongo que te gusta

Origin blog.csdn.net/qq_29232943/article/details/104138294
Recomendado
Clasificación