Spark源码阅读02-Spark核心原理之监控管理
监控管理监控管理UI监控实时UI监控历史UI监控Metrics输入源(Metrics Source)介绍输出方式(Metrics Sink)介绍TEST监控管理Spark提供了UI监控、Spark Metrics和REST 3种方式监控应用程序运行状态。其中:UI 监控以网页方式提供用户监控调度阶段、存储、运行环境和Executor参数等信息Spark Metrics通过定制的方式,将应用程序的运行情况以多种方式展现出来,REST则提供API给用户,根据API开发监控应用程序运行的各阶段消息