使用CNFS管理NAS隔离存储卷(推荐)

容器服务 Kubernetes 版支持以NAS隔离存储卷的方式挂载和使用CNFS。在多租户环境或其他需要数据隔离的场景中,您可以通过CNFS管理NAS隔离存储卷,在多个应用或Pod之间挂载同一个NAS文件系统的不同目录,使得每个目录均对应一个存储卷,存储卷之间是相互独立的、相互隔离的。本文以StatefulSet类型应用为例介绍如何使用CNFS管理NAS隔离存储卷。

前提条件

步骤一:创建隔离存储卷的工作负载

  • 创建名称为cnfs-nas-scStorageClass对象,PV对象中引用名称为cnfs-nas-filesystemCNFS。

  • 创建名称为cnfs-nas-dynamic-stsStatefulSet对象。

    • StatefulSet对象使用volumeClaimTemplates创建一个名称为pvc-cnfs-nas-dynamic-sts-0PVC对象。

    • StatefulSet对象中使用busybox镜像挂载PVC,并将1 G的临时数据1G.tmpfile写入挂载点中。

cat << EOF | kubectl apply -f -
apiVersion: storage.k8s.io/v1
kind: StorageClass
metadata:
  name: cnfs-nas-sc
mountOptions:
  - nolock,tcp,noresvport
  - vers=3
parameters:
  volumeAs: subpath
  containerNetworkFileSystem: cnfs-nas-filesystem # 引用名称为cnfs-nas-filesystem的CNFS对象。
  path: "/"
  archiveOnDelete: "false"
provisioner: nasplugin.csi.alibabacloud.com
reclaimPolicy: Delete
allowVolumeExpansion: true
---
apiVersion: apps/v1
kind: StatefulSet
metadata:
  name: cnfs-nas-dynamic-sts
  labels:
    app: busybox
spec:
  serviceName: "busybox"
  replicas: 2
  selector:
    matchLabels:
      app: busybox
  template:
    metadata:
      labels:
        app: busybox
    spec:
      containers:
      - name: busybox
        image: busybox
        command: ["/bin/sh"]
        args: ["-c", "sleep 3600;"]
        volumeMounts:
        - mountPath: "/data"
          name: pvc
  volumeClaimTemplates:
  - metadata:
      name: pvc
    spec:
      accessModes: [ "ReadWriteOnce" ]
      storageClassName: "cnfs-nas-sc" # 引用名称为cnfs-nas-sc的StorageClass对象。
      resources:
        requests:
          storage: 50Gi
EOF

步骤二:查看挂载情况

执行如下命令,查看挂载情况。

kubectl exec cnfs-nas-dynamic-sts-0 -- mount |grep nfs

预期输出:

971134b0e8-****.cn-zhangjiakou.nas.aliyuncs.com:/nas-95115c94-2ceb-4a83-b4f4-37bd35df**** on /data type nfs (rw,nosuid,nodev,relatime,user_id=0,group_id=0,default_permissions,allow_other)

预期输出表明,挂载成功。

步骤三:查看持久化数据是否写入成功

执行以下命令,写入1 G的临时文件。

kubectl exec cnfs-nas-dynamic-sts-0 -ti -- sh -c 'dd if=/dev/zero of=/data/1G.tmpfile bs=1G count=1;'

执行如下命令,查看1 G的临时文件是否写入成功。

kubectl exec cnfs-nas-dynamic-sts-0 -- ls -arlth /data

预期输出:

total 1G
-rw-r--r--    1 root     root        1.0G Dec 15 12:11 1G.tmpfile

预期输出表明,在/data下已经成功写入1 G的临时文件1G.tmpfile

步骤四:查看写入的数据是否在其他Pod中隔离

执行以下命令,查看1 G的临时文件是否在Pod cnfs-nas-dynamic-sts-1中隔离。

kubectl exec cnfs-nas-dynamic-sts-1 -- ls -arlth /data

预期输出:

sh-4.4# ls -arlth
total 8.0K
drwxr-xr-x 1 root root 4.0K Dec 15 18:07 ..
drwxr-xr-x 2 root root 4.0K Dec 15 18:07 .

预期输出表明,在Pod cnfs-nas-dynamic-sts-0中写入了1 G的临时文件1G.tmpfile,在Pod cnfs-nas-dynamic-sts-1中相互隔离。

相关文档