本文介绍通过Logtail插件采集数据的概念及相关配置流程。

简介

Logtail具备灵活的插件扩展机制,支持定制采集插件实现各类数据的采集,例如HTTP数据、MySQL查询结果、MySQL Binlog等。
  • 通过Logtail插件采集HTTP数据,并将数据处理结果上传到日志服务,可以进行实时的服务可用性检测和持续的可用性监控。
  • 通过Logtail插件采集MySQL查询结果,可以根据自增ID或时间等标志实现增量数据同步。
  • 通过Logtail插件采集MySQL Binlog,可以增量订阅数据库的变更数据,并进行实时查询与分析。

配置流程

配置流程
  1. 配置采集方式。

    不同数据源具有不同的Logtail采集配置,请按照您的数据源类型设置对应的Logtail采集配置。

  2. 配置处理方式。

    您可对一个数据源配置多个处理方式,Logtail会根据配置顺序逐一执行各个处理方式。各类数据源均支持所有类型的处理方式,详情请参见处理数据

  3. 应用到机器组。

    将采集配置和处理配置应用到指定的机器组,Logtail会自动拉取配置并开始采集。