使用前须知
阿里云日志服务与全站加速DCDN联合推出日志功能，支持近实时采集DCDN实时日志。日志服务提供实时查询、可视化分析、告警、投递、加工等一站式服务。本文介绍DCDN实时日志相关的功能介绍、资产详情、费用说明及使用限制。功能介绍 您的业务...
日志（Log）
日志服务采用半结构化的数据模式定义一条日志，包含日志主题、日志时间、日志内容、日志来源和日志标签五个数据域。日志服务对各个数据域的格式要求不同，详细说明如下表所示。数据域 说明 格式 日志主题 日志服务保留字段（_topic_）用于...
全局参数
decode-output String 否 utf8 当存储的日志数据的是二进制数据时，指定数据的编码方式，用于解析数据。支持的编码方式包括：utf8：使用utf8解析数据，默认值。lartin1：使用lartin1解析数据。gbk：使用gbk解析数据。profile String 否 ...
选择网络
网络类型 阿里云内网：阿里云内网为千兆共享网络，日志数据通过阿里云内网传输比公网传输更快速、稳定，内网包括VPC和经典网络。公网：使用公网传输日志数据，不仅会受到网络带宽的限制，还可能会因网络抖动、延迟、丢包等影响数据采集的...
基本概念
说明 大部分场景下，日志是实时发送给日志服务的，因此 日志时间 与 日志接收时间 基本相同。如果是导入历史日志的情况，例如通过SDK导入过去30天的日志，那么 日志接收时间 就是当前时间，和 日志时间 不一致。日志标签 日志存在标记，...
数据加工仪表盘
创建数据加工任务后，日志服务默认为每个加工任务创建一个仪表盘，您可以在仪表盘中查看数据加工任务运行指标。本文介绍加工任务运行指标详情及如何查看数据加工仪表盘。查看仪表盘 创建加工任务后，您可以在 数据加工概览 页面查看该任务...
常见问题
阿里云会使用我在日志服务上存储的数据吗？阿里云是否会将自己的数据存储在日志服务上？如果数据量突然激增，日志服务如何保证服务不受影响？日志服务中的数据如何实现低成本存储？日志服务中的数据可以保存多久？如何开始使用日志服务？...
可视化概述
日志服务支持可视化展示您的查询与分析结果。您可以根据分析需求选用合适的统计图表类型展示查询和分析结果，并将结果保存到实时刷新的仪表盘中。此外，您还可以将日志服务与第三方可视化工具对接。可视化方式 日志服务支持的可视化方式...
语言简介
日志服务语言SLS DSL（Domain Specific Language）是日志服务数据加工使用的与Python兼容的脚本。SLS DSL基于Python语言开发，提供两百多个内置函数来简化数据加工任务。自由编排 通过SLS DSL自由编辑函数，对各种逻辑进行复杂组合，可以...
跨地域传输数据
日志服务支持通过数据加工实现跨地域传输数据，本文介绍跨地域传输数据的使用场景、操作步骤、计费等内容。使用场景 当您的业务分布在不同地域时，相关日志也会分布在不同地域。当您需要对不同地域的日志进行集中管理时，您可以使用日志...
日志类别及字段说明
购买日志分析存储容量后，云安全中心默认开启了安全日志、网络日志、主机日志，分别记录系统中的安全事件、网络流量情况和主机的活动。本文介绍云安全中心支持的日志类型以及每种日志类型的字段说明。日志分类 云安全中心分为安全日志、...
什么是威胁分析与响应
功能特性 标准化数据采集 采集跨云平台、跨产品、跨账号的安全告警日志、网络日志、系统日志、应用日志等，对数据进行标准化、上下文增强。多维度威胁检测 基于多源数据关联分析、AI图计算推理、以及实时更新的威胁情报等威胁发现手段，补...
A100售后支持相关问题
购买数据库审计实例后，您可以通过以下操作配置数据库审计服务：启用数据库审计实例 管理数据库审计实例 登录数据库审计系统 添加数据库实例 部署Agent程序 更多信息，请参见 A100快速入门。如何测试数据库审计网络连通性？数据库审计外网...
概述
Web应用防火墙WAF（Web Application Firewall）日志服务帮助您采集并存储接入WAF防护的网站域名的Web访问和攻击的防护日志，基于阿里云日志服务，输出查询分析、统计图表、报警服务、下游计算对接与投递等功能，帮助您专注于分析，远离琐碎...
新功能发布记录
2022-11-21 全部地域 接入Kubernetes JVM监控数据 接入Kubernetes数据面监控数据 Kubernetes数据面监控基于 日志服务 与龙蜥社区合作共建的无侵入监控能力，您可以直观地分析整个Kubernetes的数据流向与瓶颈问题，轻松应对复杂的云原生环境...
使用前须知
Web应用防火墙（WAF）的日志服务功能帮助您采集并存储WAF防护对象（云产品实例、域名）的Web访问及攻击防护日志，并基于阿里云日志服务，提供查询分析、统计图表、报警服务、下游计算对接与投递等能力，帮助您专注于分析，远离琐碎的查询和...
阿里云日志服务Splunk Add-on
本文介绍如何通过阿里云日志服务Splunk Add-on将日志服务上的日志投递到Splunk。架构 Splunk Add-on架构：通过Splunk Data Input创建日志服务消费组，并从日志服务进行实时日志消费。将采集到的日志通过Splunk私有协议（Private Protocol）...
米连科技
通过对各应用系统、服务器、数据库及网络安全产品等服务的访问日志做统一的采集，并利用日志服务的秒级查询、日志聚类、AI异常检测能力、多种告警方式，伊对构建了异常事件的快速分析与响应平台，确保了线上系统的稳定。以日志服务为基础的...
使用前须知
阿里云Web应用防火墙（WAF）联合日志服务推出WAF日志服务功能，提供网站域名访问日志、攻击防护日志的实时采集、查询、分析、加工、消费等一站式服务，满足等保合规要求和您的网站业务防护和运营需求。本文介绍WAF日志服务功能相关的资产...
Spark UI
本文介绍如何在作业运行中和结束后查看Apache Spark web UI。操作步骤 登录 Data Lake Analytics管理控制台。...过期后Spark UI虽然不能打开，但是OSS上的日志数据是未被删除的，您可以根据需求通过OSS客户端查看日志数据或删除。
畅捷通
来源多 网络、服务器、移动App、Web、Docker等各种来源的日志，接口繁多，并且要求实时性高，无法集中统一管理。应用深入 各产品部门对收集来的数据都有着自己个性化的需求，监控报警、问题诊断、分析挖掘、报表等，消费模式也多种多样。...
使用MongoDB存储日志数据
本文以存储Web服务的访问日志为例，介绍如何使用MongoDB来存储、分析日志数据，让日志数据发挥最大的价值。本文的内容同样适用于其他的日志存储型应用。Web服务器日志 一个典型的Web服务器的访问日志类似如下，包含访问来源、用户、访问的...
备份SQL Server数据
RDS SQL Server支持自动备份和手动备份两种方式，您可以通过设置备份策略调整RDS数据备份和日志备份的周期实现自动备份，或手动备份数据。备份功能说明 数据备份 备份方式 功能说明 物理备份 支持全量物理备份和增量物理备份，暂不支持逻辑...
监控分析平台对比
监控分析平台需要解决的数据问题 运维和SRE团队为了保证业务稳定和支持业务发展，需要对大量的数据进行采集和分析，包括机器硬件、网络指标、用户行为等多方面的数据。在完成数据采集后，还需要有一套合适的系统进行转换、存储、处理、分析...
日志审计服务概述
日志审计服务覆盖基础（ActionTrail、容器服务Kubernetes版）、存储（OSS、NAS）、网络（SLB、ALB、API网关、VPC）、数据库（关系型数据库RDS、云原生分布式数据库PolarDB-X 1.0、云原生数据库PolarDB）、安全（WAF、DDoS防护、云防火墙、...
数据投递概述
数据投递 数据投递是指将日志服务采集的数据通过控制台投递至其他阿里云产品，便于您存储数据或联合其他系统消费数据。启用数据投递后，日志服务将定时将采集到的数据投递至对应的云产品。应用场景 数据投递适用于数据存储、离线分析等场景...
采集-IoT/嵌入式日志
配置如下：C Producer配置 ARM（树莓派）缓存：10 MB 聚合时间：3秒（聚合时间、聚合数据包大小、聚合日志数任一满足即打包发送）聚合数据包大小：1 MB 聚合日志数：1000 发送线程：1 自定义tag：5 X86 缓存：10MB 聚合时间：3秒（聚合时间...
开通审计日志
云数据库MongoDB基于阿里云日志服务SLS（Log Service），推出审计日志功能，提供日志的查询、在线分析和导出等，帮助您时刻掌握产品安全及性能情况。背景信息 阿里云日志服务SLS（Log Service）是针对日志类数据的一站式服务，由阿里巴巴...
采集-多渠道数据
日志服务LogHub功能提供数据实时采集与消费，其中实时采集功能支持50+种手段。数据采集一般有两种方式，区别如下。本文档主要讨论通过LogHub流式导入（实时）采集数据。方式 优势 劣势 例子 批量导入 吞吐率大，面向历史存量数据 实时性较...
数据加工快速入门
本文以网站访问日志为例，为您介绍完整的数据加工流程，帮助您快速熟悉数据加工功能及其操作。前提条件 已创建名为web-project的Project。具体操作，请参见 创建Project。在Project（web-project）中创建名为website_log的源Logstore。具体...
实时计算（Blink）消费
阿里云实时计算通过创建日志服务源表的方式，可以直接消费日志服务中的数据。本文介绍了如何为实时计算创建日志服务源表以及创建过程涉及到的属性字段提取和类型映射。创建日志服务源表 日志服务是实时数据存储，实时计算能将其作为流式...
生成威胁情报
日志审计服务支持对接入日志服务的云产品日志进行威胁情报检测，有效识别云产品使用过程中存在的潜在威胁。日志审计服务还支持以告警方式将检测到的异常及时通知给相关人员，提高威胁检查效率和响应速度。重要 自2023年03月30日起，日志...
恢复全量数据
如果您拥有原实例的数据备份和日志备份，可以将其恢复到新实例中，可用于误操作后恢复以及分析历史数据等场景。前提条件 原实例需要满足如下条件：实例运行状态为 运行中 且没有被锁定。当前没有进行中的迁移任务。已完成备份。RDS默认有...
常用监控指标
本文介绍了使用Web应用防火墙日志服务发起查询/分析时常用的监控指标及其含义。您可以将这些指标用于告警配置条件中，自定义监控业务的异常情况。本文也提供了在告警配置中建议使用的监控指标阈值和指标异常时的处理建议。监控指标 释义 ...
常用监控指标
本文介绍了使用Web应用防火墙日志服务发起查询/分析时常用的监控指标及其含义。您可以将这些指标用于告警配置条件中，自定义监控业务的异常情况。本文也提供了在告警配置中建议使用的监控指标阈值和指标异常时的处理建议。监控指标 释义 ...
查看日志分析仪表盘
日志分析仪表盘是以图表形式展示的日志查询与分析结果。WAF日志服务基于常见的业务及防护查询场景，为您预置了运营中心、访问中心、安全中心仪表盘，方便您无需输入查询与分析语句，仅通过修改查询时间，即可快速查询您关心的网站业务和...
升级数据库版本
将数据库恢复上线 必须 正常2分钟内 资源消耗：应用增量事务日志是资源密集型操作。小规格实例（例如2核4 GB）可能会因事务日志数量较多而导致恢复速度下降。数据库恢复加速选项：RDS SQL Server 2019及更高版本提供加速数据库恢复...
使用Terraform配置日志审计服务
本文介绍如何使用Terraform调用接口配置日志审计服务。前提条件 已安装和配置Terraform。具体操作，请参见 在Cloud Shell中使用Terraform、在本地安装和配置Terraform。背景信息 Terraform是一种开源工具，用于安全高效地预览、配置和管理...
恢复SQL Server数据
将数据库恢复上线 必须 正常2分钟内 资源消耗：应用增量事务日志是资源密集型操作。小规格实例（例如2核4 GB）可能会因事务日志数量较多而导致恢复速度下降。数据库恢复加速选项：RDS SQL Server 2019及更高版本提供加速数据库恢复...
数据模型
本文介绍采集到日志服务中的日志数据的数据模型。为方便您理解日志服务中日志数据的数据模型并顺利使用，从如下基本概念展开介绍。地域（Region）地域为阿里云的服务节点。通过在不同的阿里云地域部署服务，实现您的服务距离您的客户更近，...
- 产品推荐
- 这些文档可能帮助您