kube-controller-manager是管理多种Kubernetes控制器的控制面组件，例如负责节点管理的Node Controller、管理有状态应用的控制器StatefulSet Controller、处理无状态应用的Deployment Controller等。本文介绍kube-controller-manager组件的指标清单和对应大盘的使用指导。
相关概念
Workqueue
使用前须知
操作入口
请参见查看集群控制面组件监控大盘。
指标清单
指标是组件对外透出状态和参数的方式之一，kube-controller-manager组件使用的指标清单如下。
指标 | 类型 | 说明 |
workqueue_adds_total | Counter | Workqueue处理的新增事件（Adds）数量。 |
workqueue_depth | Gauge | Workqueue当前队列深度。如果队列深度长时间保持在较高水平，表明Controller不能及时处理队列中的任务，导致任务堆积。 |
workqueue_queue_duration_seconds_bucket | Histogram | 任务在Workqueue中存在的时长。Bucket阈值为{10-8, 10-7, 10-6, 10-5, 10-4, 10-3, 10-2, 10-1, 1, 10}。单位：秒。 |
memory_utilization_byte | Gauge | 内存使用量。单位：字节（Byte）。 |
cpu_utilization_core | Gauge | CPU使用量。单位：核（Core）。 |
rest_client_requests_total | Counter | 从状态值（Status Code）、方法（Method）和主机（Host）维度分析HTTP请求次数。 |
rest_client_request_duration_seconds_bucket | Histogram | 从方法（Verb）和URL维度分析HTTP请求时延。 |
如下资源使用率指标已废弃，请及时去除依赖该指标的告警和监控。
cpu_utilization_ratio：CPU使用率。
memory_utilization_ratio：内存使用率。
大盘使用指导
您可以配置大盘观测请求的分位数quantile和PromQL的采样时长interval。大盘基于组件指标和相关PromQL绘制，大盘的可观测性展示和功能解析如下。
Workqueue
可观测性展示
功能解析
名称 | PromQL | 说明 |
Workqueue入队速率 | sum(rate(workqueue_adds_total{job="ack-kube-controller-manager"}[$interval])) by (name) | Workqueue在单位时间内新增事件（Adds）的数量。 |
Workqueue深度 | sum(rate(workqueue_depth{job="ack-kube-controller-manager"}[$interval])) by (name) | Workqueue深度在单位时间内的变化。 |
Workqueue处理时延 | histogram_quantile($quantile, sum(rate(workqueue_queue_duration_seconds_bucket{job="ack-kube-controller-manager"}[5m])) by (name, le)) | 事件在Workqueue中存在的时长。 |
资源
可观测性展示
功能解析
大盘名称 | PromQL | 说明 |
内存使用量 | memory_utilization_byte{container="kube-controller-manager"} | 内存使用量。单位：字节。 |
CPU使用量 | cpu_utilization_core{container="kube-controller-manager"}*1000 | CPU使用量。单位：毫核。 |
Kube API
可观测性展示
功能解析
大盘名称 | PromQL | 说明 |
Kube API请求QPS |
| kube-controller-manager对kube-apiserver发起的HTTP请求，从方法（Method）和返回值（Code）维度分析。 |
Kube API请求时延 | histogram_quantile($quantile, sum(rate(rest_client_request_duration_seconds_bucket{job="ack-kube-controller-manager"}[$interval])) by (verb,url,le)) | kube-controller-manager对kube-apiserver发起的HTTP请求时延，从方法（Verb）和请求URL维度进行分析。 |
相关文档
关于其他集群控制面组件监控的指标详情、大盘使用指引和常见指标异常说明，请参见kube-apiserver组件监控指标说明、etcd组件监控指标说明、kube-scheduler组件监控指标说明、cloud-controller-manager组件监控指标说明。