分区
Logstore读写日志必定保存在某一个分区（Shard）上。每个日志库（Logstore）分若干个分区，每个分区由MD5左闭右开区间组成，每个区间范围不会相互覆盖，并且所有的区间的范围是MD5整个取值范围。Shard是每个Logstore下读写基本单元，每个...
开启日志采集功能
开启CloudLens for SLS后，日志服务默认采集 全局日志（审计日志、错误日志、监控指标）以及 运行日志（原实例日志中的重要日志和作业运行日志），以上日志均免费。新开通CloudLens for SLS，全局日志 存储在名称为 log-service-{阿里云主...
监控日志服务
日志服务提供服务日志功能，用于记录操作日志、消费组延迟日志、Logtail告警日志、Logtail采集日志和Logtail状态日志，帮助您实时掌握日志服务的使用状况，提高运维效率。前提条件 已开通服务日志。更多信息，请参见 开通服务日志。背景...
使用前须知
支持一键开启实例日志（重要日志、详细日志、任务运行日志）和全局日志（审计日志、计费日志、错误日志、监控指标）的采集功能，集中管理日志的采集状态。说明 实例日志（重要日志、详细日志、任务运行日志）和全局日志（审计日志、错误...
最佳实践
分析Nginx访问日志 分析Apache日志 分析IIS日志 分析Log4j日志 分析网站日志 查询分析程序日志 分析负载均衡7层访问日志 分页显示查询分析结果 分析行车轨迹日志 分析销售系统日志 数据加工 调用函数清洗数据 事件判断 处理日期时间 数据...
日志类型
详细日志 根据 Method 字段，详细日志被分为读操作、写操作和资源操作三类日志，具体如下：分类 请求方式 读操作 产生读操作日志的请求方式如下：GetHistograms GetLogs PullLogs GetCursor GetCursorTime 写操作 产生写操作日志的请求方式...
分析网站日志
本文介绍如何在日志服务控制台上分析网站日志，并通过合适的统计图表可视化展示分析结果。前提条件 已采集网站日志。具体操作，请参见 数据采集。已创建索引。具体操作，请参见 创建索引。背景信息 网站日志是网站运维的重要信息，包含PV、...
使用Aliyun Log Java Producer写入日志数据
相对于原始的API或SDK，使用该类库写日志数据能为您带来诸多优势，包括高性能、计算与I/O逻辑分离、资源可控制等。特点 线程安全：Producer接口暴露的所有方法都是线程安全的。异步发送：调用Producer的发送接口通常能够立即返回响应。...
使用前须知
阿里云日志服务联合数据库MongoDB推出日志审计功能，将日志服务的部分功能融合到自身的审计日志、慢日志、运行日志中，实现日志实时查询、可视化分析、告警等功能。本文介绍MongoDB日志相关的资源说明、应用场景、费用说明及使用限制。资源...
为什么购买了资源包仍会欠费？
目前，日志服务提供新版资源包和旧版资源包，不同资源包抵扣规则不同。本文介绍购买资源包后仍产生欠费的原因。说明 在日志服务使用过程中，您可以在 用户中心 查看消费明细。更多信息，请参见 账单查询。新版资源包 购买了资源包后仍出现...
创建索引
倒排索引是一种数据存储结构，由关键词...查询和分析的示例，请参见 查询和分析网站日志、查询和分析JSON日志、采集及分析Nginx监控日志、分析负载均衡7层访问日志。设置字段的最大长度 分析时，日志服务默认支持的字段值最大长度为2048字节，...
云数据库RDS
mysql_perf_innodb_log_write_requests 平均每秒日志写请求数 mysql_perf_innodb_log_writes 平均每秒向日志文件的物理写次数 mysql_perf_innodb_os_log_fsyncs 平均每秒向日志文件完成的fsync()写数量 mysql_perf_ins_size RDS实例磁盘...
PolarDB云原生数据库
mysql_perf_innodb_log_write_requests 每秒日志写请求数 mysql_perf_innodb_os_log_fsyncs 每秒向日志文件完成的fsync()写数量 mysql_perf_innodb_rows_deleted 每秒删除的行数 mysql_perf_innodb_rows_inserted 每秒插入的行数 mysql_...
查询和分析JSON日志
本文以查询和分析JSON类型的网站日志为例，为您介绍查询和分析JSON日志的步骤，并提供SQL语句示例。前提条件 已采集JSON日志。具体操作，请参见 使用极简模式采集日志。步骤一：创建索引 登录 日志服务控制台。在Project列表区域，单击目标...
查询和分析日志
创建索引后，您可以在查询和分析页面对采集到的日志进行实时查询和分析。前提条件 已 创建索引。...相关文档 查询与分析常见问题 时间字段转换示例 查询和分析网站日志 查询和分析JSON日志 分析Nginx访问日志 分析负载均衡7层访问日志
查询语法
日志服务提供一套查询语法，用于指定日志查询时的过滤规则，从而筛选日志中满足条件的记录，筛选结果可以用于分析语句，进行更复杂的分析处理。查询语法 重要 日志服务查询语句和分析语句（SELECT语句）以竖线（|）分割。基础语法：查询...
查询和分析网站日志
本文以查询和分析网站日志为例，帮助您快速上手查询和分析操作。前提条件 已采集到网站访问日志。具体操作，请参见 使用完整正则模式采集日志。步骤一：创建索引 登录 日志服务控制台。在Project列表区域，单击目标Project。在 日志存储>...
日志字段详情
目前友盟实时日志订阅功能支持U-App（App日志）、U-MiniProgram（小程序日志）和U-Web（网站日志）三类数据，本文介绍这三类日志的字段详情。U-App日志 U-App日志记录用户启动App、使用App功能和App发生异常的相关数据。字段 说明 app_key ...
提取字符串动态键值对
r"\b(\w+)eat([^\|]+)",{r"\1":r"\2 by \1"})加工结果 处理后日志为：content:rats eat rice|chicks eat bugs|kittens eat fish|kittens:fish by kittens chicks:bugs by chicks rats:rice by rats 客户案例 例如某网站日志中有一个URL数据...
Java SDK概述
日志服务Java SDK封装了日志服务的所有API接口。您可以通过日志服务Java SDK方便地调用日志服务的所有API接口。版本说明 在下载日志服务Java SDK前，请选取合适的版本。...SlsSample.java 查日志、写日志、查看日志分布情况相关示例。
日志字段详情
错误日志 根据 Method 字段，错误日志被分为读操作、写操作和资源操作三类错误日志，具体如下：分类 请求方式 读操作 产生读操作日志的请求方式如下：GetHistograms GetLogs PullLogs GetCursor GetCursorTime 写操作 产生写操作日志的请求...
快速使用WAF日志服务
Web应用防火墙（Web Application Firewall，简称WAF）日志服务通过阿里云日志服务实时地采集已接入WAF防护的网站业务的全量日志，并对采集到的日志数据进行查询与分析，以丰富的仪表盘形式展示查询结果，满足等保合规要求和网站业务的防护...
使用前须知
阿里云Web应用防火墙（WAF）联合日志服务推出WAF日志服务功能，提供网站域名访问日志、攻击防护日志的实时采集、查询、分析、加工、消费等一站式服务，满足等保合规要求和您的网站业务防护和运营需求。本文介绍WAF日志服务功能相关的资产...
使用前须知
Web应用防火墙（WAF）的日志服务功能帮助您采集并存储WAF防护对象（云产品实例、域名）的Web访问及攻击防护日志，并基于阿里云日志服务，提供查询分析、统计图表、报警服务、下游计算对接与投递等能力，帮助您专注于分析，远离琐碎的查询和...
日志（Log）
例如您可以根据日志类型为网站相关日志设置不同的日志主题（access_log、operation_log）。更多信息，请参见 日志主题（Topic）。包括空字符串在内的任意字符串，大小为0~128字节。该字段值为空字符串时，表示未设置日志主题。日志时间 ...
迁移Elasticsearch查询方案到日志服务
日志服务提供Elasticsearch兼容接口，支持您将日志采集到日志服务后，仍可以沿用Elasticsearch的查询方案。重要 本文档为阿里云原创文档，知识产权归阿里云所有，由于本文档旨在介绍阿里云与第三方产品交互的服务能力，因此可能会提及第三...
使用前须知
功能优势 等保合规：支持存储六个月的网站访问日志，助力网站符合等保合规要求。配置简单：轻松配置即可实时采集互联网流量日志。实时分析：依托 日志服务，提供实时日志分析能力、开箱即用的报表中心，让您对经过云防火墙的互联网流量以及...
使用前须知
阿里云日志服务和DDoS高防联合推出全量日志功能，提供网站访问日志、CC攻击日志的实时采集、查询、分析、加工、消费等一站式服务，帮您排查网站访问异常、追踪CC攻击者来源、分析网站运营情况等。本文介绍全量日志功能相关的资产详情、费用...
数据加密
日志服务支持通过密钥管理服务KMS（Key Management Service）对数据进行加密存储，提供数据静态保护能力。日志服务同时支持基于SSL/TLS的HTTPS加密传输，有效防止数据在云端的潜在安全风险。服务器端加密 日志服务支持如下两种加密类型机制...
日志采集Agent对比
日志采集场景下客户端测评 DT时代，数以亿万计的服务器、移动终端、网络设备每天产生海量的日志。中心化的日志处理方案有效地解决了在完整生命周期内对日志的消费需求，而日志从设备采集上云是始于足下的第一步。三款日志采集工具 Logstash...
复制和分发数据
日志服务支持对每一个源Logstore配置一个加工任务，实现数据复制后分发到不同Logstore。本文介绍数据复制后分发到不同Logstore的典型场景和操作方法。场景说明 某数据分析公司需要将Logstore中的每一条数据进行复制，并根据内容分别分发到...
使用数据实验室
日志服务数据实验室为您提供各种场景的模拟日志数据及各种公共数据集数据，便于您熟悉日志服务的查询分析、查看报表等各种操作。本文介绍如何使用阿里云数据实验室。前提条件 已开通日志服务。首次登录 日志服务控制台 时，根据页面提示...
数据读写
本文介绍日志服务读写数据的限制。类别 限制项 说明 备注 Project 写入流量 原始数据写入流量最大为100GB/min。超过限制时，返回状态码403，提示Inflow Quota Exceed。如果您有更大的使用需求，请提 工单 申请。写入次数 写入次数最大为...
过滤VPC流日志公网流量
在专有网络VPC控制台上开通流日志功能后，流日志将被采集到日志服务中，您可以通过日志服务对流日志进行查询、分析和排查网络故障。本文介绍通过日志服务数据加工对流日志进行公网流量过滤的操作方法。前提条件 已开通VPC流日志功能。具体...
快速设置日志告警
背景信息 日志服务数据实验室提供模拟的网站访问日志及相关仪表盘（网站审计中心、网站访问中心等），便于您熟悉查询、分析、告警等操作。本案例以监控 网站审计中心 仪表盘中的统计图表 请求成功率 和 响应时间趋势 为例，当请求成功率...
复制Logstore数据
如果您需要将Logstore中的日志数据保存多份，可以使用数据加工功能复制Logstore数据。本文介绍复制Logstore数据的使用场景和操作步骤。使用场景 某公司访问日志被采集存储在同一阿里云账号中的多个Project。现有需求将 project-a 中 ...
Data Explorer案例
Data Explorer配置 查询语句 SLS and request_time(status>=200 and status)分析示例 示例1 在网站访问日志中，统计过去一天内网站请求的每小时平均耗时以及随时间的变化情况。Data Explorer配置 查询和分析语句|select date_trunc('hour',...
使用前须知
阿里云DDoS高防（新BGP）、DDoS高防（国际）联合日志服务推出全量日志分析功能，提供网站访问日志、CC攻击日志的实时采集、查询、分析、加工、消费等一站式服务，帮助您排查网站访问异常、追踪CC攻击者来源、分析网站运营情况等。...
通过Data Explorer构建查询和分析语句
例如分析网站访问日志，统计过去4小时内所有请求的平均耗时，以及同比昨天同一时间段的变化情况。其中，日志中的 request_time 字段记录了每个请求的耗时。针对此需求，您只需组合指标统计和同环比两个场景，然后通过 request_time 字段...
使用CloudLens for SLS分析资源用量
在 日志服务 中所有计费项都是单独计费的，例如您存储日志会产生日志存储费用，您采集日志会产生写流量费用等。计费项说明，请参见 按使用功能计费模式计费项。在账单数据中，BillingItem字段代表计费项。日志服务 的计费项组成，请参见 ...
- 产品推荐
- 这些文档可能帮助您