SPARK 监控概览页面包括集群 SPARK 近期告警与异常、SparkHistory 进程 JVM 指标、SparkHistory 进程的文件描述符信息和 SparkHistory 进程启停历史。

SPARK 服务最近告警和异常



默认展示该集群最近一天的告警和异常事件。

SparkHistory 进程的 JVM 指标



详细监控指标项和含义,与HDFS 监控 NameNode 进程 JVM 指标章节类似,支持自定义时间范围区间和时间粒度。

SparkHistory 进程的文件描述符信息



  • Max File Descriptor: SparkHistory 进程可以使用的最大的文件描述符数目
  • Open File Descriptor:SparkHistory 进程已经使用的文件描述符数目

SparkHistory 进程的启停历史



表格具体含义,参考HDFS 监控 NameNode 进程启停操作历史