上篇《Spark(四十七):Spark UI 数据可视化及MetricsSystem信息收集过程分析(一)》讲解Spark Web UI渲染的过程,本章将讲解Spark Web UI界面渲染数据的收集过程,即MetricsSystem信息收集过程。
参考:
《Apache Spark源码走读之21 -- WEB UI和Metrics初始化及数据更新过程分析》
《Spark Structrued Streaming源码分析--(四)ProgressReporter每个流处理进度计算、StreamQueryManager管理运行的流》