采集主机文本日志
本文介绍如何使用Logtail采集主机文本日志。前提条件 已创建Logtail机器组并添加相应服务器，创建机器组的步骤，请参见 创建用户自定义标识机器组（推荐）或 创建IP地址机器组。安装Logtail的主机需开放80（HTTP）端口和443（HTTPS）端口。...
通过消费组读取文本日志进行模板匹配
本文介绍通过读取日志文本进行模板匹配的操作步骤。前提条件 已采集日志到源Logstore或Metricstore。具体操作，请参见 数据采集、接入时序数据。重要 本文中所涉及的Logstore为Standard Logstore。更多信息，请参见 管理Logstore。已创建...
通过消费组读取文本日志进行模板发现
本文介绍通过消费组拉取文本日志进行文本发现的操作步骤。前提条件 已采集日志到源Logstore或Metricstore。具体操作，请参见 数据采集、接入时序数据。重要 本文中所涉及的Logstore为Standard Logstore。更多信息，请参见 管理Logstore。已...
通过DaemonSet方式采集Kubernetes容器文本日志
本文介绍DaemonSet方式采集容器文本日志的工作原理、使用限制、前提条件、操作步骤等信息。工作原理 DaemonSet模式 在DaemonSet模式中，Kubernetes集群确保每个节点（Node）只运行一个Logtail容器，用于采集当前节点内所有容器（Containers...
通过Sidecar方式采集Kubernetes容器文本日志
本文介绍Sidecar方式采集容器文本日志的工作原理、使用限制、前提条件、操作步骤等信息。工作原理 Sidecar模式 在Sidecar模式中，每个容器组（Pod）运行一个Logtail容器，用于采集当前容器组（Pod）所有容器（Containers）的日志。不同Pod...
概述
更多信息，请参见 采集主机文本日志、通过DaemonSet-控制台方式采集容器文本日志、通过Sidecar-控制台方式采集容器文本日志、通过DaemonSet-CRD方式采集容器日志、通过Sidecar-CRD方式采集容器文本日志。容器标准输出输入插件 支持采集容器...
如何实现文件中的日志被采集多份
容器场景 采集容器日志的配置步骤，请参见 通过DaemonSet方式采集容器文本日志 和 通过Sidecar-控制台方式采集容器文本日志。控制台 在Logtail采集配置的 输入配置 中，打开 允许文件多次采集 开关。CRD 定义多个CRD。
管理Logtail采集配置
创建Logtail采集配置 在日志服务控制台上创建Logtail采集配置，详情请参见 采集文本日志。查看Logtail采集配置 登录 日志服务控制台。在Project列表区域，单击目标Project。在 日志存储>日志库 页签中，单击目标日志库前面的>，依次选择 ...
安装Logtail（ECS实例）
具体操作，请参见 配置用户标识、创建IP地址机器组、创建用户自定义标识机器组 及 采集文本日志。重要 若下载Logtail时选择网络为阿里云内网（经典网络、VPC）时，可通过修改ilogtail_config.json文件中的网络参数进行跨地域采集。相关文档...
采集标准Docker容器日志
本文介绍如何部署Logtail容器以及创建Logtail配置，用于采集标准Docker容器日志（文本日志和标准输出）。前提条件 已创建Project和Logstore。更多信息，请参见 创建项目Project 和 创建Logstore。目标容器持续产生日志。重要 Logtail只采集...
丢弃字段
重要 表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口 当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件配置。具体操作，请参见 概述。配置说明 重要 ...
字段加密
重要 表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口 当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件配置。具体操作，请参见 概述。配置说明 表单配置...
如何在日志样例中设置不可见字符
操作步骤 进入 分隔符-文本日志 模式，具体步骤请参见 采集主机文本日志。在 Logtail配置 页面，在浏览器空白处按下鼠标右键，单击 检查。在浏览器的右侧面板，单击 控制台 页签。输入如下内容，然后单击回车键。const input=document....
算法说明
日志服务异常智能分析应用提供文本分析功能，用于对日志中的文本日志进行智能化、自动化的分析，提供全局的统计分析结果。文本分析功能通过 日志模板发现 和 日志模板匹配 两个子任务，实现对于日志数据的监控和统计。您可以根据待分析的...
重命名字段
重要 表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口 当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件配置。具体操作，请参见 概述。配置说明 重要 ...
打包字段
重要 表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口 当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件配置。具体操作，请参见 概述。配置说明 重要 ...
字段值映射处理
重要 表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口 当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件配置。具体操作，请参见 概述。配置说明 表单配置...
Logtail基本问题
如何配置Logtail采集日志 日志服务支持通过Logtail采集文本日志和容器日志，还支持通过Logtail插件采集日志。具体操作，请参见如下文档。采集文本日志 采集容器日志 使用Logtail插件采集日志 Logtail是如何工作的？Logtail采集原理包括监听...
数据编码与解码
重要 表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口 当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件配置。具体操作，请参见 概述。BASE64编码 您可以...
导入Amazon S3文件
提取时间正则 当选择 数据格式 为 单行文本日志 或 跨行文本日志，您可以使用正则表达式提取日志中的时间。例如日志样例为 127.0.0.1-[10/Sep/2018:12:36:49 0800]"GET/index.html HTTP/1.1" 时，则您可以设置 提取时间正则 为[0-9]{0,2}\/...
概述
日志采集限制 扩展插件对文本日志的处理采用行模式，即文件级别的元数据（例如_tag_:_path_、_topic_等）会被存放到每条日志中，添加扩展插件后会影响和Tag相关的功能，包括：默认情况下，上下文查询和LiveTail功能不可用。如果您要使用...
如何通过完整正则模式采集多种格式日志
WARNING类型的多行日志 INFO类型的简单文本日志 DEBUG类型的键值日志[2018-10-01T10:30:31,000][WARNING]java.lang.Exception:another exception happened at TestPrintStackTrace.f(TestPrintStackTrace.java:3)at TestPrintStackTrace.g...
数据脱敏
重要 表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口 当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件配置。具体操作，请参见 功能入口。配置说明 重要 ...
LiveTail
重要 如果您使用了Logtail插件处理文本日志或采集容器标准输出，则必须在Logtail插件配置中添加aggregators配置。更多信息，请参见 概述。背景信息 在线上运维的场景中，往往需要对日志队列中的日志进行实时监控，从最新的日志中提取出关键...
转换IP地址
重要 表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口 当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件配置。具体操作，请参见 概述。配置说明 说明 ...
导入OSS数据
提取时间正则 当选择 数据格式 为 单行文本日志 或 跨行文本日志，您需要使用正则表达式提取日志中的时间。例如日志样例为 127.0.0.1-[10/Sep/2018:12:36:49 0800]"GET/index.html HTTP/1.1" 时，则您可以设置 提取时间正则 为[0-9]{0,2}\/...
添加字段
使用限制 文本日志和容器标准输出只支持表单配置方式，其余输入插件只支持JSON配置方式。功能入口 当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail采集配置时，添加插件配置。具体操作，请参见 概述。配置说明 重要 Logtail...
什么是Logtail
具体操作，请参见 采集文本日志 和 采集容器日志。完成上述操作后，Logtail开始采集您服务器上的日志，并发送到对应的Logstore中。您可以通过日志服务控制台、API、SDK或CLI查询日志。功能优势 基于日志文件，无侵入式采集日志。您无需修改...
上下文查询
重要 如果您使用了Logtail插件处理文本日志或采集容器标准输出，则必须在Logtail插件配置中添加aggregators配置。更多信息，请参见 概述。已创建索引。具体操作，请参见 创建索引。背景信息 日志上下文查询是指定日志来源（机器+文件）和...
如何调试正则表达式
在配置Logtail采集文本日志时，如果选择完整正则模式解析和采集日志，需要根据您的日志样例配置正则表达式。本文主要介绍在配置正则表达式过程中如何进行调试。重要 本文档可能包含第三方产品信息，该信息仅供参考。阿里云对第三方产品的...
展开JSON字段
重要 表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口 当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件配置。具体操作，请参见 概述。配置说明 重要 ...
智能异常分析概述
智能化地分析和挖掘非结构化文本日志，自动发现异常模式。支持您对算法产生的结果进行标注，帮助您逐步实现更好的模型训练和学习。依托于日志服务的高可用性与数据可靠性，告警服务的可用性达到99.9%。智能异常分析应用跟告警服务深度整合...
采集Node.js日志
在 接入数据 区域，选择 正则-文本日志。选择目标Project和Logstore，单击 下一步。创建机器组。如果您已有可用的机器组，请将该机器组添加到 应用机器组。如果您还没有可用的机器组，请执行以下操作（以ECS为例）。使用场景 选择 主机场景...
采集WordPress日志
在 接入数据 区域，选择 正则-文本日志。选择目标Project和Logstore，单击 下一步。创建机器组。如果您已有可用的机器组，请将该机器组添加到 应用机器组。如果您还没有可用的机器组，请执行以下操作（以ECS为例）。使用场景 选择 主机场景...
日志（Log）
格式 文本日志（LogFile）、事件（Event）、数据库日志（BinLog）、时序数据（Metric）等数据都是日志的不同载体。日志服务采用半结构化的数据模式定义一条日志，包含日志主题、日志时间、日志内容、日志来源和日志标签五个数据域。日志...
通过Sidecar方式采集日志
Logtail支持通过极简模式、正则模式、分隔符模式、JSON模式等模式采集文本日志。更多信息，请参见 概述。说明 是否为Docker文件 的配置项请保持关闭。标准输出示例 采集标准输出时，日志路径为stdlog卷在容器的挂载路径，本文示例为/stdlog...
通过Sidecar方式采集日志
Logtail支持通过极简模式、正则模式、分隔符模式、JSON模式等模式采集文本日志。更多信息，请参见 概述。说明 是否为Docker文件 的配置项请保持关闭。标准输出示例 采集标准输出时，日志路径为stdlog卷在容器的挂载路径，本文示例为/stdlog...
通过Sidecar方式采集日志
Logtail支持通过极简模式、正则模式、分隔符模式、JSON模式等模式采集文本日志。更多信息，请参见 概述。说明 是否为Docker文件 的配置项请保持关闭。标准输出示例 采集标准输出时，日志路径为stdlog卷在容器的挂载路径，本文示例为/stdlog...
日志采集支持纳秒精度时间戳
日志采集步骤请参见 采集主机文本日志。添加分隔符解析插件。具体配置说明，请参见 分隔符模式解析。添加时间解析插件。具体配置说明，请参见 时间解析。时间解析插件需要配置时间格式，例如分隔符插件解析后的字段 time 为 2023.10.26-20....
- 产品推荐
- 这些文档可能帮助您