数据压缩
nil { log.Fatal(err)} compressed=compressed[:compressedSize]/解压 bodyRawSize:=len(data)/解压日志服务数据，可读取返回http头中的x-log-bodyrawsize。decompressed:=make([]byte,bodyRawSize)err=lz4.Uncompress(compressed,...
PostLogStoreLogs
日志内容解压失败。404 ProjectNotExist Project does not exist.Project不存在。404 LogStoreNotExist Logstore does not exist.Logstore不存在。413 PostBodyTooLarge Body size {bodySize} must little than 10485760.请求body（压缩前...
PutWebtracking
日志内容解压失败。400 PostBodyTooLarge Body size bodySize must little than 10485760.请求Body（压缩前）不能超过10MB。500 InternalServerError Specified Server Error Message.内部服务调用错误。更多信息，请参见 通用错误码。
解压Snappy压缩文件
日志服务将日志投递到OSS时，支持通过Snappy压缩OSS文件。投递成功后，您可以通过C++ Lib、Java Lib、Python Lib、Linux工具等方式解压OSS文件。使用C++ Lib解压 下载Snappy Lib。使用 Snappy.Uncompress 解压。使用Java Lib解压 选择以下...
ZIP包解压
当您需要批量上传文件、按特定目录结构上传文件、上传完整的文件或对文件快速进行资源分发时，可以配置解压规则，上传ZIP文件到OSS指定路径，触发函数计算自动解压，并将解压后内容保存回OSS。前提条件 已开通函数计算服务。您可以在函数...
安装Logtail（Windows系统）
日志服务Project与服务器同地域不同账号 配置流程如下图：完成Logtail安装后，您需配置用户标识，配置用户自定义标识，创建机器组，并选择数据源配置Logtail采集日志。具体操作，请参见 配置用户标识、创建用户自定义标识机器组 及 采集...
导入Amazon S3文件
压缩格式 待导入的S3文件的压缩格式，日志服务根据对应格式进行解压并读取数据。编码格式 待导入的S3文件的编码格式。目前仅支持UTF-8和GBK。检查新文件周期 如果目标S3文件路径中不断有新文件产生，您可以根据需求设置 检查新文件周期。...
导入OSS数据
压缩格式 待导入的OSS文件的压缩格式，日志服务根据对应格式进行解压并读取数据。编码格式 待导入的OSS文件的编码格式。目前仅支持UTF-8和GBK。检查新文件周期 如果目标OSS文件路径中不断有新文件产生，您可以根据需求设置 检查新文件周期...
导出Trace数据到Grafana
步骤一：安装日志服务插件 为Grafana安装日志服务插件的操作步骤如下：执行以下命令将日志服务插件项目压缩包解压到Grafana插件目录。使用YUM或RPM安装的Grafana：unzip aliyun-log-grafana-datasource-plugin-master.zip-d/var/lib/...
编码解码函数
函数示例 示例1 原始日志 test:asewds 加工规则 e_set("f1",str_decode(str_encode("你好","utf8"),"utf8"))加工结果 test:asewds f1:你好 示例2 原始日志 f2:test 测试数据 加工规则 e_set("f1",str_encode(v("f2"),"ascii",errors=...
查看全局数据
日志量整体趋势、产品日志量趋势 过去30天的日志量趋势 当天的统计有一小时延迟 OSS全局数据 仪表盘 描述 总日志量、小时日志量、天日志量 OSS日志全局统计 访问日志总日志量、小时日志量、天日志量 访问日志统计 计量日志总日志量、小时...
算法说明
文本分析中的算法采用LogParser和异常检测技术，提供日志分析报表帮助您了解日志的全局信息和可能存在的异常情况，包括：通过日志报表快速定位可能出现异常的日志类别（例如新出现的日志类别，异常分数Top5的日志类别等），缩小人工排查的...
快速使用WAF日志服务
Web应用防火墙（Web Application Firewall，简称WAF）日志服务通过阿里云日志服务实时地采集已接入WAF防护的网站业务的全量日志，并对采集到的日志数据进行查询与分析，以丰富的仪表盘形式展示查询结果，满足等保合规要求和网站业务的防护...
开启或关闭日志服务
Web应用防火墙（Web Application Firewall，简称WAF）默认关闭日志服务功能。如果您需要存储防护对象的日志数据，并对日志数据进行查询与分析，您需要先开启WAF日志服务。如果您不再需要使用日志服务，您可以降配日志存储容量（包年包月...
过滤日志
您在使用Logtail采集日志时，您可以使用processor_filter_regex插件或processor_filter_key_regex插件过滤日志。本文介绍各个插件的参数说明和配置示例。重要 表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志...
日志索引表
云产品分类 CloudLens应用 日志类型 存储 CloudLens for SLS 重要日志（消费组延迟日志、Logtail告警日志、Logtail采集日志、Logtail状态日志）详细日志 任务运行日志（定时SQL任务运行日志、数据导入、投递等任务的运行日志）错误日志 ...
日志设置与日志容量管理
开通日志服务后，您可以根据业务防护及分析需要，设置日志字段和存储类型，开启或关闭防护对象日志采集功能，修改日志存储时长，更有效地利用日志容量。您也可以实时查看日志容量，及时升级容量，避免日志数据无法写入专属日志库。本文介绍...
日志（Log）
日志服务采用半结构化的数据模式定义一条日志，包含日志主题、日志时间、日志内容、日志来源和日志标签五个数据域。日志服务对各个数据域的格式要求不同，详细说明如下表所示。数据域 说明 格式 日志主题 日志服务保留字段（_topic_）用于...
管理服务日志
背景信息 开启服务日志功能时，您可以选择服务日志的类型，包括 详细日志、重要日志、任务运行日志，日志类型的说明请参见 日志类型。详细日志：详细日志会在您选择的Project创建名称为 internal-operation_log 的LogStore，在当前Project...
通过消费组读取文本日志进行模板匹配
日志模板匹配通过在线匹配日志和模板，监控日志模板的统计信息，例如数量变化。本文介绍通过读取日志文本进行模板匹配的操作步骤。前提条件 已采集日志到源Logstore或Metricstore。具体操作，请参见 数据采集、接入时序数据。重要 本文中所...
Logtail采集详情
本文介绍Logtail的采集过程，包括监听日志、读取日志、处理日志、过滤日志、聚合日志和发送日志。采集过程 Logtail采集数据的过程如下：监听日志 读取日志 处理日志 过滤日志 聚合日志 发送日志 说明 更多关于Logtail采集原理的介绍，请...
开通日志分析功能
云防火墙联合日志服务推出了日志分析功能，可以实现对防护资产流量日志的实时采集、查询、分析、加工和消费等一站式服务，帮助您有效监控和保护网络资产安全，满足等保合规要求。本文介绍如何在云防火墙控制台上开通日志分析功能，从而将...
常见问题
如何采集K8s集群的容器日志 SLB访问日志采集不到 日志采集Agent对比 Windows系统的ECS安装Logtail服务日志提示异常信息 如何配置日志服务的时间转换格式 数据存储常见问题 日志服务如何存储、管理用户的日志？删除日志库，日志数据是否丢失...
数据模型
例如：您有一个名为big-game的游戏应用，服务器上有三种日志：操作日志（operation_log）、应用程序日志（application_log）以及访问日志（access_log），您可以首先创建名为big-game的项目，然后在该项目下面为这三种日志创建三个日志库，...
日志审计合规
云安全中心日志审计配置检测 RDS日志审计配置检测 日志审计状态检测 PolarDB（DRDS）日志审计配置检测 K8s日志审计配置检测 ActionTrail日志审计配置检测 OSS（对象存储）日志审计配置检测 应用防火墙（WAF）日志审计配置检测 堡垒机日志...
日志管理
日志服务如何存储、管理用户的日志？日志库（Logstore）是日志服务中的日志存储和查询的基本单元，通常用于存储一类日志数据。目前，支持在控制台或者通过API完成对日志库的增删改查操作。日志库创建完成后，用户通过API或SDK向指定日志库...
创建流日志
本文介绍在VPC控制台上创建流日志的操作步骤及其相关的操作。前提条件 已创建资源实例。具体操作，请参见 创建弹性网卡、创建和管理专有网络 和 创建和管理交换机。已在资源实例所在地域创建日志服务Project和Logstore。具体操作，请参见 ...
开通日志功能
本文介绍如何在函数计算控制台中开启日志功能，将函数调用日志投递到日志服务。前提条件 已创建服务。具体操作，请参见 创建服务。配置日志功能 使用函数计算控制台配置日志 前提条件 函数计算 创建服务 可选：日志服务SLS 创建日志项目和...
开启日志投递
E-Mapreduce（简称EMR）的开源组件在运行过程中会产生大量日志。本文介绍如何在EMR控制台中开启日志投递功能，将EMR日志投递到日志服务中。前提条件 已创建EMR集群。具体操作，请参见 E-MapReduce快速入门。使用限制 本文操作仅适用于新版...
创建流日志
您可以在智能接入网关中创建流日志实例，将智能接入网关的传入和传出流量信息投递到日志服务中。本文介绍创建流日志实例的操作步骤及相关操作。前提条件 已购买智能接入网关SAG-1000设备且其软件版本为1.7.0及以上。具体操作，请参见 购买...
云产品侧额外费用须知
本文介绍在日志审计服务中开启云产品日志采集后，部分云产品侧额外的费用说明。VPC 费用说明 自2022年09月01日起，阿里云流日志功能结束公测，正式商业化并开始收费。更多信息，请参见【变更】流日志商业化公告。流日志的总费用=流日志生成...
使用前须知
本文介绍日志审计服务的使用限制、费用说明等信息。使用限制 存储方式与地域限制 重要 使用日志审计服务进行日志区域化存储或中心化存储前，请合理评估存储地域是否满足相关法律法规和安全监管的要求。中心化存储 从各个阿里云账号、各个...
开通全量日志分析功能
本文介绍如何在DDoS高防（新BGP、国际）控制台上开通全量日志分析功能，将DDoS高防（新BGP、国际）全量日志采集到日志服务中。前提条件 已创建新BGP或国际高防实例。具体操作，请参见 购买DDoS高防实例。已为新BGP或国际高防实例接入域名。...
开启网关日志投递
您可以在微服务引擎MSE控制台中，为云原生网关开启日志投递功能，将日志投递到日志服务中。通过分析云原生网关的访问日志了解客户端用户行为、客户端用户的地域分布，方便排查问题。前提条件 已创建云原生网关实例。具体操作，请参见 新建...
常见问题
本文介绍使用日志服务前的常见问题。什么是日志服务？日志服务可以做什么？日志服务能为用户带来哪些价值？日志服务支持采集哪些数据？日志服务支持哪些数据接入方式？阿里云会使用我在日志服务上存储的数据吗？阿里云是否会将自己的数据...
云产品日志概述
云安全中心 安全日志 漏洞日志 基线日志 安全告警日志 云平台配置检查日志 网络日志 DNS解析日志 本地DNS日志 网络会话日志 Web访问日志 主机日志 进程启动日志 网络连接日志 登录流水日志 暴力破解日志 进程快照日志 账号快照日志 端口...
日志管理概述
Web应用防火墙（WAF）日志服务帮助您采集并存储WAF防护对象（云产品实例、域名）的Web访问及攻击防护日志，并基于阿里云日志服务，输出查询分析、统计图表、报警服务、下游计算对接与投递等能力，帮助您专注于分析，远离琐碎的查询和整理...
开通日志分析功能
云安全中心 旗舰版、企业版 支持查看网络日志、安全日志和主机日志，高级版、防病毒版 仅支持查看安全日志和主机日志。不同版本的区别，请参见 计费概述。登录 云安全中心控制台。在左侧导航栏，选择 风险治理>日志分析。在 开通日志服务 ...
开启实时日志投递
您可以在全站加速控制台中开启实时日志投递功能，将DCDN加速域名所产生的日志投递到日志服务进行分析。前提条件 已添加加速域名。具体操作，请参见 添加服务域名。已开通日志服务。操作步骤 重要 如果您使用RAM用户开启实时日志投递功能，...
最佳实践
分析Nginx访问日志 分析Apache日志 分析IIS日志 分析Log4j日志 分析网站日志 查询分析程序日志 分析负载均衡7层访问日志 分页显示查询分析结果 分析行车轨迹日志 分析销售系统日志 数据加工 调用函数清洗数据 事件判断 处理日期时间 数据...
- 产品推荐
- 这些文档可能帮助您