采集ACK集群标准输出-新版(DaemonSet)

已有的ACK集群中安装Logtail组件

1. 登录容器服务管理控制台，在左侧导航栏选择集群列表。

2. 在集群列表页面，单击目标集群名称，然后在左侧导航栏，选择运维管理 > 组件管理。

3. 在日志与监控页签中，找到logtail-ds，然后单击安装。

新建ACK集群时安装Logtail组件

1. 登录容器服务管理控制台，在左侧导航栏选择集群列表。

2. 单击创建集群，在组件配置页面，选中使用日志服务。

   本文只描述日志服务相关配置，关于更多配置项说明，请参见创建ACK托管集群。

   当选中使用日志服务后，会出现创建项目（Project）的提示。

   • 使用已有Project

     您可以选择一个已有的Project来管理采集到的容器日志。

     

   • 创建新Project

     日志服务自动创建一个Project来管理采集到的容器日志。其中ClusterID为您新建的Kubernetes集群的唯一标识。

     

CRD-AliyunPipelineConfig（推荐）

您只需要创建AliyunPipelineConfig自定义资源即可创建Logtail采集配置，资源创建完成后自动生效。

1. 登录容器服务管理控制台。

2. 在左侧导航栏中，单击集群列表。

3. 在集群列表页面中，单击目标集群操作列下的更多，然后单击管理集群。

4. 创建名为example-k8s-stdout.yaml的文件。

   说明

   您可用采集配置生成器生成目标场景YAML脚本，该工具可帮您快速完成配置，减少手动操作。

   以下示例YAML文件以多行模式采集default命名空间下，标签为app: ^(.*test.*)$的Pod中的标准输出，并将其发送到名为k8s-log-test的Project中的名为k8s-stdout（自动创建）的Logstore。您需根据实际情况修改YAML中的以下参数：

   1. project，示例：k8s-log-test。

      登录日志服务控制台，确定您安装的Logtail生成的Project的名称，通常格式为k8s-log-<YOUR_CLUSTER_ID>。

   2. IncludeK8sLabel，示例：app: ^(.*test.*)$。用于筛选目标Pod的标签，当前条件指定标签键为app，值中包含test的Pod会被采集。

   有关YAML文件中config项的详情，包括支持的输入、输出、处理插件类型和容器过滤方式，完整的参数配置请参见Kubernetes标准输出（新版）。完整的YAML参数详情请参见CR参数说明。

   apiVersion: telemetry.alibabacloud.com/v1alpha1
   # 创建一个 ClusterAliyunPipelineConfig
   kind: ClusterAliyunPipelineConfig
   metadata:
     # 设置资源名，在当前Kubernetes集群内唯一。该名称也是创建出的Logtail采集配置名。如果名称重复则不会生效。
     name: example-k8s-stdout
   spec:
     # 定义Logtail采集配置
     config:
       aggregators: [ ]
       global: {}
       # 定义输入插件
       inputs:
         # 使用input_container_stdio插件采集容器标准输出
         - Type: input_container_stdio
           # 采集标准输出
           IgnoringStderr: false
           # 采集标准错误
           IgnoringStdout: false
           # 启用容器元数据预览
           CollectingContainersMeta: true
           # 容器过滤
           ContainerFilters:
             IncludeK8sLabel:
               app: ^(.*test*.)$
           # 配置多行采集
           Multiline:
             # 配置行首正则表达式
             StartPattern: \d+-\d+-\d+.*
             Mode: custom
             UnmatchedContentTreatment: single_line
           # 使用处理插件解析日志
       processors:
           # 正则模式解析
         - Type: processor_parse_regex_native
           SourceKey: content
           # 正则表达式
           Regex: (\d+-\d+-\d+\s\S+)(.*)
           # 字段索引
           Keys:
             - time
             - detail
       # 定义输出插件
       flushers:
         - Type: flusher_sls
           Logstore: k8s-stdout
       sample: |-
         2025-04-02 16:00:03
         1
         2
         3
         4
         5
         6
         7
         8
         9
     project:
       name: k8s-log-test
     logstores:
       - name: k8s-stdout

5. 执行kubectl apply -f example-k8s-stdout.yaml，其中example-k8s-stdout.yaml替换为您创建的 YAML 文件名称，Logtail开始采集容器内的标准输出，并发送到日志服务中。

日志服务控制台

1. 登录日志服务控制台。

2. 选择Project列表中您在安装Logtail组件时所使用的Project，如k8s-log-<your_cluster_id>。在Project页面中点击目标Logstore的Logtail配置，添加Logtail配置，并单击Kubernetes-标准输出-新版的立即接入。

   

3. 在机器组配置页面K8s场景的ACK Daemonset方式下勾选k8s-group-${your_k8s_cluster_id}机器组并单击>添加到应用机器组中，点击下一步。

4. 创建Logtail采集配置，按下文填写必须配置后点击下一步即可，Logtail采集配置生效大概需要1分钟，请耐心等待。

   此处仅介绍必须配置，详细配置请参见Kubernetes标准输出（新版）。

   在全局配置中输入配置名称。

   

5. 创建索引和预览数据：日志服务默认开启全文索引，此时查询会索引日志中所有字段。您也可以根据采集到的日志，手动创建字段索引，或者单击自动生成索引，日志服务将生成字段索引，通过此索引针对特定字段进行精确查询，从而减少索引费用和提高查询效率。更多信息请参见创建索引。