通过Logtail插件接入Prometheus监控数据

日志服务Logtail插件支持采集Prometheus格式的各类指标数据,例如Node Exporter、Kafka Exporter及应用所涉及的Prometheus指标等。本文介绍通过Logtail插件采集Prometheus监控数据的操作步骤。

前提条件

已创建Project和MetricStore。具体操作,请参见创建项目Project创建MetricStore

使用限制

只有Linux Logtail 0.16.66及以上版本的Logtail支持采集Prometheus监控数据。如果您已在服务器上安装旧版本的Logtail,需先升级。具体操作,请参见安装Logtail(Linux系统)

操作步骤

重要

一个Logtail插件中只能同时存在一个Prometheus的Logtail采集配置。如果同时存在多个,则随机生效一个。

  1. 登录日志服务控制台

  2. 接入数据区域的监控数据页签下,单击抓取Prometheus格式指标

  3. 选择目标Project和MetricStore,单击下一步

  4. 创建机器组页签中。

    • 如果已有可用的机器组,请单击使用现有机器组

    • 如果您还没有可用的机器组,请执行以下操作(以ECS为例)。

      1. ECS机器页签中,通过手动选择实例方式选择目标ECS实例,单击创建

        具体操作,请参见安装Logtail(ECS实例)

        重要

        如果您的服务器是与日志服务属于不同账号的ECS、其他云厂商的服务器和自建IDC时,您需要手动安装Logtail。具体操作,请参见安装Logtail(Linux系统)。手动安装Logtail后,您必须在该服务器上手动配置用户标识。具体操作,请参见配置用户标识

      2. 安装完成后,单击确认安装完毕

      3. 创建机器组页面,输入名称,单击下一步

        日志服务支持创建IP地址机器组和用户自定义标识机器组,详细参数说明请参见创建IP地址机器组创建用户自定义标识机器组

  5. 确认目标机器组已在应用机器组区域,单击下一步

    重要

    创建机器组后立刻应用,可能因为连接未生效,导致心跳为FAIL,您可单击自动重试。如果还未解决,请参见Logtail机器组无心跳进行排查。

  6. 数据源设置向导中,设置配置名称插件配置,然后单击下一步

    插件配置包括inputsprocessors。日志服务已提供inputs模板,包括globalscrape_configs两个节点。

    • inputs为数据源配置,必选项。

      重要
      • Prometheus格式指标的抓取配置和Prometheus本身的抓取配置规则一致,只支持globalscrape_configs两个节点的配置。更多信息,请参见Prometheus抓取配置规则

      • 一个inputs中只允许配置一个类型的数据源。

    • processors为处理配置,可选项。更多信息,请参见追加字段

      如果您上报的数据需要添加Logtail所在主机的IP、HostName或其他自定义字段,您可以打开开启高级编辑模式开关,添加processors配置,此处需使用追加字段插件。例如:

      {
        "processors":[
          {
            "type":"processor_appender",
            "detail": {
              "Key": "__labels__",
              "Value": "|host#$#{{__host__}}|ip#$#{{__ip__}}",
              "SortLabels": true
            }
          }
        ]
      }

后续步骤

  • 查询和分析

    采集到数据后,您可以在MetricStore中进行查询和分析操作。具体操作,请参见查询和分析时序数据

  • 日志服务可视化

    日志服务自动在对应Project中生成主机监控仪表盘,您可以直接使用该仪表盘查看查询分析结果,及进行告警等相关操作。具体操作,请参见仪表盘

  • Grafana可视化

    日志服务的时序数据支持直接对接Grafana进行可视化。具体操作,请参见时序数据对接Grafana