查询和分析JSON日志
本文以查询和分析JSON类型的网站日志为例，为您介绍查询和分析JSON日志的步骤，并提供SQL语句示例。前提条件 已采集JSON日志。具体操作，请参见 使用极简模式采集日志。步骤一：创建索引 登录 日志服务控制台。在Project列表区域，单击目标...
Logtail发布历史
修复ProcessorParseDelimiterNative解析携带下一行数据的问题 修复在反压情况下可能出现的文件无法读完的问题 修复plugin_export panic导致插件崩溃的问题 修复解析Apsara格式日志导致的崩溃问题 修复解析Apsara格式日志解析数据黏连问题 1...
消费-搭建监控系统
日志服务把所有集群的监控数据作为日志收集到服务端，解决了多集群管理和异构系统日志收集的问题，监控数据统一成格式化的日志发送到日志服务。日志服务为监控系统提供了：统一的机器管理：安装一次logtail，所有的后续操作在日志服务端...
数据类型
content:{ remote_addr:"192.0.2.0"request:{ request_length:"73"request_method:"GE 更多参考信息 关于查询和分析JSON日志的更多操作场景和常见问题，包括设置索引、查询和分析具有索引的JSON字段、使用JSON函数、分析JSON数组等，请参见...
查询语法
若无法找到想要的日志，可参见文档进行排查：查询不到日志的排查思路。查询方式 说明 示例 精确查询 使用完整的词进行查询。日志服务查询采用的是分词法，精确查询时并不能完全匹配关键词。例如查询语句为 abc def，查询结果将包含所有 abc...
查看Trace实例详情
接入Trace数据后，您可以在Trace实例详情页面，进行查看Trace数据...相关文档 查询和分析日志的常见问题，请参见 常见问题。Trace服务的介绍视频，请参见 Trace服务简介。Java应用接入Trace的操作视频，请参见 Java应用接入SLS Trace实践。
创建索引
全文索引和字段索引配置参数 全文索引 参数 说明 日志聚类 打开 日志聚类 开关后，日志服务在采集文本日志时会自动聚合相似度高的日志，提取共同的日志模式，帮助您快速掌握日志整体情况。更多信息，请参见 日志聚类。大小写敏感 查询时...
查询和分析JSON日志的常见问题
本文介绍查询和分析JSON日志的常见问题。日志样例 本文中介绍的各个案例是基于如下JSON格式的订单处理系统日志。request 字段为订单请求信息，JSON格式。一个请求中包含一个用户的多个订单，订单中包含购买的商品和支付总价。response 字段...
查询与分析常见问题
日志查询常见问题 查询不到日志的排查思路 查询与分析日志的常见报错 日志消费与查询区别 如何模糊查询日志？如何精确查询日志？查询不精确有哪些原因？日志服务如何设置字段索引 如何修改SQL查询语句输出结果的行数 如何查询日志的来源...
采集标准Docker容器日志
采集宿主机文本日志的操作步骤与采集服务器文本日志相同。具体操作，请参见 采集文本日志。重要 默认情况下，宿主机根目录会被挂载到Logtail容器的/logtail_host 目录。在Logtail配置中，设置日志路径时，您需要加上此前缀。例如需要采集宿...
常见问题
售前常见问题 产品计费常见问题 数据采集常见问题 数据存储常见问题 查询与分析常见问题 数据加工常见问题 消费与投递常见问题 售前常见问题 什么是日志服务？日志服务可以做什么？日志服务能为用户带来哪些价值？日志服务支持采集哪些数据...
如何关闭日志服务或停止计费？
如何降低日志的存储成本？如果需要 查看Logstore的存储容量，请参见 如何查看日志服务的存储容量或消费记录？删除Project或Logstore 警告 通过任意方式删除Project或Logstore后，所有日志数据及配置信息都会被释放，不可恢复，请慎重确认，...
机器组简介
机器组是包含多台服务器的虚拟分组，日志服务通过机器组的方式管理所有需要通过Logtail采集日志的服务器。本文介绍机器组的概念和类型、配置机器组的步骤。背景信息 日志服务支持通过一个 Logtail采集配置 来采集多台服务器上的数据，这些...
使用资源函数增量获取数据
使用增量拉取模式获取数据时，日志服务每次只拉取新增或更新的数据，效率高。本文介绍如何使用res_rds_mysql函数增量获取RDS MySQL数据库中的数据。前提条件 日志服务 已上传数据到日志服务源Logstore中。具体操作，请参见 数据采集。已...
日志类别及字段说明
514763 网络会话日志 字段名 说明 示例 asset_type 产生日志的资产。取值：ECS：云服务器ECS。SLB：负载均衡SLB。NAT：NAT网关。ECS dst_ip 目标IP地址。119.96.XX.XX dst_port 目标端口。443 in_out 网络会话的数据传输方向。固定取值为...
如何删除日志？
日志服务不支持直接删除日志，您可以通过调整Logstore的数据保存时间，从而实现日志删除。当日志保存时间达到您所设置的保存时间后，日志将被删除...相关文档 Project无法删除、日志丢失、降低日志的存储成本等问题，请参见 Project无法删除？
数据采集常见问题
本文列举日志服务数据采集常见问题。Logtail基本问题 Logtail采集日志失败的排查思路 如何使用Logtail自动诊断工具 Logtail机器组问题排查思路（主机场景）ECS经典网络切换为VPC后，如何更新Logtail配置 Logtail服务的app_info.json文件中...
产品计费常见问题
本文列举日志服务的计费常见问题。日志服务如何停止计费？为什么购买了资源包仍会欠费？如何选择资源包规格？为什么索引流量费用是读写流量费用的几倍？为什么会产生活跃Shard租用费用？为什么只创建Project和Logstore会产生费用？为什么...
常见问题
本文介绍使用日志服务前的常见问题。什么是日志服务？日志服务可以做什么？日志服务能为用户带来哪些价值？日志服务支持采集哪些数据？日志服务支持哪些数据接入方式？阿里云会使用我在日志服务上存储的数据吗？阿里云是否会将自己的数据...
常见问题及错误排查
常见问题 为什么在关闭采集前修改日志存储天数不生效（例如您想要关闭SLB 7层访问日志的采集并将存储天数修改为1天以清除存量日志，但是修改后发现存储天数仍为180天）？在关闭采集前修改日志存储天数，您需要先保存存储天数的修改，然后...
常见问题和错误排查
本文介绍日志服务所提供的Elasticsearch兼容接口的常见问题和错误排查方法。重要 本文档为阿里云原创文档，知识产权归阿里云所有，由于本文档旨在介绍阿里云与第三方产品交互的服务能力，因此可能会提及第三方公司或产品等名称。常见问题 Q...
日志主题（Topic）
例如系统A由前端HTTP请求处理模块、缓存模块、逻辑处理模块和存储模块组成，您可设置前端HTTP请求处理模块日志的Topic为http_module，缓存模块日志的Topic为cache_module、逻辑处理模块日志的Topic为logic_module和存储模块日志的Topic为...
使用Terraform配置日志审计服务
account multi_account=["1235*","1236*"]resource_directory_type="custom"} 附录：variable_map参数列表 参数名 描述 默认值 actiontrail_enabled 是否开启操作审计（Actiontrail）日志的采集功能，取值：true：开启。false：关闭。false...
云产品侧额外费用须知
流日志的总费用=流日志生成费+日志服务的服务费。更多信息，请参见 流日志计费说明。开启流日志采集说明 您在日志审计服务中开启VPC流日志的采集后，日志审计服务会自动完成如下操作。自动对审计中心账号及审计多账号配置下的成员账号开通...
日志组（LogGroup）
日志组（LogGroup）是一组日志的集合，是写入与读取日志的基本单元。一个日志组中的数据包含相同Meta（IP地址、Source等信息）。写入日志到日志服务或从日志服务读取日志时，多条日志被打包为一个日志组，以日志组为单元进行写入与读取。该...
开通日志分析功能
云防火墙联合日志服务推出了日志分析功能，可以实现对防护资产流量日志的实时采集、查询、分析、加工和消费等一站式服务，帮助您有效监控和保护网络资产安全，满足等保合规要求。本文介绍如何在云防火墙控制台上开通日志分析功能，从而将...
创建流日志
本文介绍在VPC控制台上创建流日志的操作步骤及其相关的操作。前提条件 已创建资源实例。具体操作，请参见 创建弹性网卡、创建和管理专有网络 和 创建和管理交换机。已在资源实例所在地域创建日志服务Project和Logstore。具体操作，请参见 ...
管理服务日志
本文介绍了如何开通、关闭服务日志功能以及如何修改服务日志的配置。背景信息 开启服务日志功能时，您可以选择服务日志的类型，包括 详细日志、重要日志、任务运行日志，日志类型的说明请参见 日志类型。详细日志：详细日志会在您选择的...
如何查询日志的来源机器和日志条目
本文主要介绍在日志服务控制台中，如何查询日志的来源机器和日志条目。通过Logtail采集日志时，如果机器组类型为IP地址机器组，则机器组中的机器通过IP地址的方式区分。在查询时，可以通过hostname和自定义配置的IP地址来判断日志的来源...
Logtail常见问题
分类 文档链接 基本概念说明 Logtail基本问题 日志采集Agent对比 心跳问题 Logtail机器组问题排查思路（主机场景）采集问题 通用场景 查询本地采集状态 如何查看Logtail采集错误信息 Logtail采集日志失败的排查思路 日志服务采集数据常见的...
其他日志
本视频向您展示数据加工其他结构化日志的解析。
KV日志
本视频向您展示数据加工结构化数据Key-Value格式日志的解析。
分隔符日志
本视频向您展示数据加工结构化数据分隔符日志的解析。
JSON日志
本视频向您展示数据加工结构化数据JSON格式日志的解析。简单JSON解析 复杂JSON解析
算法说明
文本分析中的算法采用LogParser和异常检测技术，提供日志分析报表帮助您了解日志的全局信息和可能存在的异常情况，包括：通过日志报表快速定位可能出现异常的日志类别（例如新出现的日志类别，异常分数Top5的日志类别等），缩小人工排查的...
创建流日志
因此，当您删除流日志实例后，为避免后续产生不必要的费用，请在日志服务控制台上删除用于存储流日志的目标Project。具体操作，请参见 删除Project。后续操作 将智能接入网关流日志投递到日志服务后，您可以在日志服务中执行查询分析、下载...
基于数据加工分析Java异常日志
本视频介绍基于数据加工分析Java异常日志的解决方案。
日志字段详情
本文介绍CloudLens for SLS相关日志的字段详情。审计日志 字段 说明 APIVersion API版本。AccessKeyId 访问日志服务时使用的访问密钥。CallerType 访问用户的类型。ClientIp 客户端IP地址。Config Logtail采集配置。ConsumerGroup 操作的...
VPC
本文介绍VPC流日志的字段详情。字段 说明_topic_日志主题，固定为flow_log。version 流日志版本 vswitch-id 弹性网卡所在交换机ID vm-id 弹性网卡绑定的云服务器ID vpc-id 弹性网卡所在专有网络ID account-id 账号ID eni-id 弹性网卡ID ...
日志（Log）
格式 文本日志（LogFile）、事件（Event）、数据库日志（BinLog）、时序数据（Metric）等数据都是日志的不同载体。日志服务采用半结构化的数据模式定义一条日志，包含日志主题、日志时间、日志内容、日志来源和日志标签五个数据域。日志...
- 产品推荐
- 这些文档可能帮助您