kube-controller-manager组件监控指标及大盘使用说明
kube-controller-manager是管理多种Kubernetes控制器的控制面组件，例如负责节点管理的Node Controller、管理有状态应用的控制器StatefulSet Controller、处理无状态应用的Deployment Controller等。本文介绍kube-controller-manager组件的指标清单和对应大盘的使用指导。
相关概念
Workqueue
使用前须知
操作入口
请参见查看集群控制面组件监控大盘。
指标清单
指标是组件对外透出状态和参数的方式之一，kube-controller-manager组件使用的指标清单如下。
|
指标 |
类型 |
说明 |
|
workqueue_adds_total |
Counter |
Workqueue处理的新增事件（Adds）数量。 |
|
workqueue_depth |
Gauge |
Workqueue当前队列深度。如果队列深度长时间保持在较高水平，表明Controller不能及时处理队列中的任务，导致任务堆积。 |
|
workqueue_queue_duration_seconds_bucket |
Histogram |
任务在Workqueue中存在的时长。Bucket阈值为{10-8, 10-7, 10-6, 10-5, 10-4, 10-3, 10-2, 10-1, 1, 10}。单位：秒。 |
|
memory_utilization_byte |
Gauge |
内存使用量。单位：字节（Byte）。 |
|
cpu_utilization_core |
Gauge |
CPU使用量。单位：核（Core）。 |
|
rest_client_requests_total |
Counter |
从状态值（Status Code）、方法（Method）和主机（Host）维度分析HTTP请求次数。 |
|
rest_client_request_duration_seconds_bucket |
Histogram |
从方法（Verb）和URL维度分析HTTP请求时延。 |
如下资源使用率指标已废弃，请及时去除依赖该指标的告警和监控。
cpu_utilization_ratio：CPU使用率。
memory_utilization_ratio：内存使用率。
大盘使用指导
您可以配置大盘观测请求的分位数quantile和PromQL的采样时长interval。大盘基于组件指标和相关PromQL绘制，大盘的可观测性展示和功能解析如下。
Workqueue
可观测性展示
功能解析
|
名称 |
PromQL |
说明 |
|
Workqueue入队速率 |
sum(rate(workqueue_adds_total{job="ack-kube-controller-manager"}[$interval])) by (name) |
Workqueue在单位时间内新增事件（Adds）的数量。 |
|
Workqueue深度 |
sum(rate(workqueue_depth{job="ack-kube-controller-manager"}[$interval])) by (name) |
Workqueue深度在单位时间内的变化。 |
|
Workqueue处理时延 |
histogram_quantile($quantile, sum(rate(workqueue_queue_duration_seconds_bucket{job="ack-kube-controller-manager"}[5m])) by (name, le)) |
事件在Workqueue中存在的时长。 |
资源
可观测性展示
功能解析
|
大盘名称 |
PromQL |
说明 |
|
内存使用量 |
memory_utilization_byte{container="kube-controller-manager"} |
内存使用量。单位：字节。 |
|
CPU使用量 |
cpu_utilization_core{container="kube-controller-manager"}*1000 |
CPU使用量。单位：毫核。 |
Kube API
可观测性展示
功能解析
|
大盘名称 |
PromQL |
说明 |
|
Kube API请求QPS |
|
kube-controller-manager对kube-apiserver发起的HTTP请求，从方法（Method）和返回值（Code）维度分析。 |
|
Kube API请求时延 |
histogram_quantile($quantile, sum(rate(rest_client_request_duration_seconds_bucket{job="ack-kube-controller-manager"}[$interval])) by (verb,url,le)) |
kube-controller-manager对kube-apiserver发起的HTTP请求时延，从方法（Verb）和请求URL维度进行分析。 |
相关文档
关于其他集群控制面组件监控的指标详情、大盘使用指引和常见指标异常说明，请参见kube-apiserver组件监控指标说明、etcd组件监控指标说明、kube-scheduler组件监控指标说明、cloud-controller-manager组件监控指标说明。