Concepto de agregación de registros: después de que se ejecute la aplicación, cargue la información de registro de ejecución del programa en el sistema HDFS.
Beneficios de la función de agregación de registros: puede ver fácilmente los detalles del programa en ejecución, lo cual es conveniente para el desarrollo y la depuración.
Nota: Para habilitar la función de agregación de registros, se requieren 重新启动
NodeManager , ResourceManager e HistoryManager
Los pasos específicos para habilitar la función de agregación de registros son los siguientes:
Colocación yarn-site.xml
vim yarn-site.xml
Agregue la siguiente configuración al archivo
<!-- 开启日志聚集功能 -->
<property>
<name>yarn.log-aggregation-enable</name>
<value>true</value>
</property>
<!-- 设置日志聚集服务器地址 -->
<property>
<name>yarn.log.server.url</name>
<value>http://hadoop102:19888/jobhistory/logs</value>
</property>
<!-- 设置日志保留时间为7天 -->
<property>
<name>yarn.log-aggregation.retain-seconds</name>
<value>604800</value>
</property>
604800/60/60/24 = 7