Spark(四十八):Spark UI 数据可视化及MetricsSystem信息收集过程分析(二)

上篇《Spark(四十七):Spark UI 数据可视化及MetricsSystem信息收集过程分析(一)》讲解Spark Web UI渲染的过程,本章将讲解Spark Web UI界面渲染数据的收集过程,即MetricsSystem信息收集过程。

参考:

Apache Spark源码走读之21 -- WEB UI和Metrics初始化及数据更新过程分析

Spark Metrics配置详解

Spark Structrued Streaming源码分析--(四)ProgressReporter每个流处理进度计算、StreamQueryManager管理运行的流

Spark Core源码精读计划#13:度量系统MetricsSystem的建立

Spark Core源码精读计划#14:Spark Web UI界面的实现

猜你喜欢

转载自www.cnblogs.com/yy3b2007com/p/10909434.html
今日推荐