ack-nvidia-device-plugin组件介绍与变更说明

若您节点操作系统为Ubuntu 22.04或Red Hat Enterprise Linux(RHEL) 9.3 64位，由于ack-nvidia-device-plugin组件会为Pod默认配置环境变量NVIDIA_VISIBLE_DEVICES=all，可能会因为节点执行systemctl daemon-reload、systemctl daemon-reexec命令后，无法访问GPU设备导致NVIDIA Device Plugin无法正常工作。更多详情，请参见运行GPU容器出现Failed to initialize NVML: Unknown Error的问题怎么办？。

若您在2025年05月01之前将集群从低版本升级到1.32版本，集群中可能会同时存在以Static Pod方式部署和DaemonSet方式部署的NVIDIA Device Plugin。可执行如下脚本查看以Static Pod方式部署的节点。

#!/bin/bash
for i in $(kubectl get po -n kube-system -l component=nvidia-device-plugin | grep -v NAME | awk '{print $1}');do
    if kubectl get po $i -o yaml -n kube-system | grep 'kubernetes.io/config.source: file' &> /dev/null;then
    kubectl get pod $i -n kube-system -o jsonpath='{.spec.nodeName}{"\n"}'
    fi
done

预期输出：

cn-beijing.10.12.XXX.XX
cn-beijing.10.13.XXX.XX

通过预期输出可以看到部分节点中仍存在以Static Pod方式部署的NVIDIA Device Plugin。可以使用如下方式将Static Pod方式部署的NVIDIA Device Plugin迁移到DaemonSet。

kubectl label nodes <NODE_NAME> ack.node.gpu.schedule=default