什么是实时日志

功能介绍 您的业务在使用 CDN 服务时,会产生大量的网络日志数据。通过实时日志功能,您可以实时采集节点产生的日志,并投递到日志服务进行存储和消费,以便快速监控和定位业务问题。开启实时日志,并成功投递日志后,根据日志投递条数产生...

使用前须知

功能介绍 您的业务在使用DCDN服务时,会产生大量的网络日志数据。通过实时日志功能,您可以实时采集节点产生的日志,并投递到日志服务进行存储和消费,以便快速监控和定位业务问题。资产详情 专属Project和Logstore 开启日志投递功能后,...

服务入口

日志服务提供私网域名和公网域名,不同网络的接入方式请参见 使用Logtail收集各网络日志数据。在Project列表区域,单击目标Project。在Project的 项目概览 页面,查看该Project所在地域的服务入口。如何选择服务入口 私网域名和公网域名...

网络质量分析

网络质量分析器应用提供网络质量分析报表,用于展示数据延迟、丢包率、探测次数、日活用户等变化趋势,帮助您了解App的网络质量情况。数据筛选条件 网络质量分析器应用会根据您设置的条件,展示对应的网络质量数据。例如趋势分析图表的筛选...

网络探测字段说明

本文介绍网络探测数据字段的详细说明。公共字段 字段 子字段 含义 示例 netInfo defaultNet 默认网络,同时接入多个网络时有意义。例如同时接WiFi与蜂窝网络时,默认网络是WiFi。WiFi usedNet 本次探测使用的网络。WiFi Android:3G/4G/5G ...

选择网络

网络类型 阿里云内网:阿里云内网为千兆共享网络日志数据通过阿里云内网传输比公网传输更快速、稳定,内网包括VPC和经典网络。公网:使用公网传输日志数据,不仅会受到网络带宽的限制,还可能会因网络抖动、延迟、丢包等影响数据采集的...

网络质量分析器数据分析最佳实践

网络探测数据字段的详细说明,请参见 网络探测字段说明。说明 您也可以通过接入应用的Project下查找名称为ipa-${应用ID}-raw的Logstore,查看原始探测数据。步骤二:自定义查询与分析 所有数据已预先设置索引,您可以通过json_extract_...

日志管理概述

输出安全网络日志到自建数据与计算中心。功能优势 等保合规:存储网站六个月以上的访问日志,助力网站符合等保合规要求。配置灵活:轻松配置即可实现Web访问及攻击防护日志的采集。支持自定义WAF日志字段和存储类型、设置需要采集日志的WAF...

计费案例

计费项 说明 日计量 单价 日计费 读写流量 上传时序数据日志服务的网络流量为10 GB×20%2 GB。2 GB 0.180元/GB/天 0.36元 索引流量-时序流量 日志服务自动配置所有字段的索引。10 GB 0.200 元/GB/天 2元 存储空间-时序存储 时序数据存储...

功能特性

本文介绍日志服务主要的功能。数据采集 日志服务提供50多种数据接入方案。...内置百种告警规则,支持一键式开启,覆盖账户安全、权限管理、存储、主机、数据库、网络日志等各个方面的合规监控。更多信息,请参见 日志审计概述。

使用前须知

云安全中心 旗舰版、企业版 支持查看网络日志、安全日志和主机日志,高级版、防病毒版 仅支持查看安全日志和主机日志。不同版本的区别,请参见 计费概述。资产详情 专属Project和Logstore 开通日志分析功能后,系统默认创建一个名为 sas-...

云产品日志概述

云安全中心 安全日志 漏洞日志 基线日志 安全告警日志 云平台配置检查日志 网络日志 DNS解析日志 本地DNS日志 网络会话日志 Web访问日志 主机日志 进程启动日志 网络连接日志 登录流水日志 暴力破解日志 进程快照日志 账号快照日志 端口...

开启控制平面日志日志告警功能

本文介绍如何在服务网格ASM控制台中配置控制平面日志采集和告警,将日志推送到日志服务的LogStore中进行存储、查询分析并配置日志告警。前提条件 阿里云账号已开通阿里云日志服务SLS。具体操作,请参见 开通日志服务。重要 将日志采集到ASM...

概述

日常工作中,企业通常会对实时日志数据进行开发。其中:日志数据来源可以为ECS、容器、移动端、开源软件、网站服务或JavaScript。本文为您介绍如何通过Tunnel、DataHub、LogHub以及DataWorks数据集成将日志数据迁移至MaxCompute。方案 说明...

使用前须知

Web应用防火墙(WAF)的日志服务功能帮助您采集并存储WAF防护对象(云产品实例、域名)的Web访问及攻击防护日志,并基于阿里云日志服务,提供查询分析、统计图表、报警服务、下游计算对接与投递等...输出安全网络日志到自建的数据与计算中心。

使用前须知

阿里云Web应用防火墙(WAF)联合日志服务推出WAF日志服务功能,提供网站域名访问日志、攻击防护日志的实时采集、查询、分析、加工、消费等一站式服务,满足等保合规要求和您的网站业务防护和运营...输出安全网络日志到自建的数据与计算中心。

Kafka实时ETL同步至Hologres

准备独享数据集成资源组并与数据网络连通 在进行数据同步前,需要完成您的独享数据集成资源组和数据源的网络连通,详情请参见 配置网络连通。说明 Kafka与Hologres支持的网络类型如下:Kafka:指定VPC网络、公网。Hologres:指定VPC网络、...

概述

在进行日志数据查询分析时,日志中的部分信息需要和外部存储(ExternalStore)的信息进行关联查询,从而进一步丰富日志服务中的日志数据。外部存储简介 外部存储和Logstore的区别 项目 外部存储(ExternalStore)Logstore 数据存储 日志...

日志管理

日志库(Logstore)是日志服务中的日志存储和查询的基本单元,通常用于存储一类日志数据。目前,支持在控制台或者通过API完成对日志库的增删改查操作。日志库创建完成后,用户通过API或SDK向指定日志库写入日志数据。如果用户希望收集阿里...

基于SLS+OSS+DLA构建海量、低成本日志分析方案

方案介绍 对于数据分析人员、开发人员或者运维人员而言,日志数据对分析和诊断问题以及了解系统活动等有着非常重要的作用,日志都是其工作过程中必不可缺的数据来源。为了节约成本,通常情况下日志会被设定一定的保存时间,此类日志称之为...

算法说明

日志聚类算法 日志聚类算法基于日志聚类功能,日志聚类功能对日志数据进行粗粒度聚类,日志聚类算法在粗粒度聚类的结果上进行精度更高的二次聚类。开启日志聚类、查看聚类结果等操作步骤,请参见 日志聚类。模板发现算法 模板发现算法使用...

日志

日志库(Logstore)是日志服务中日志数据的采集、存储和查询单元。命名规则 只能包含小写字母、数字、连字符(-)和下划线(_)。必须以小写字母或者数字开头和结尾。长度为3~63字符。完整资源示例 {"logstoreName":"access_log","ttl":1,...

云监控消费

云监控可以直接消费Logstore中日志数据,提供日志监控功能。通过将日志服务与云监控结合,形成了轻量级、全面、易用的日志监控解决方案。简单、易用,相比传统ELK方案,零编码即可享有完整监控解决方案。提供日志数据实时分析、监控图表...

日志数据预处理与投递

本视频介绍如何对日志数据进行预处理与投递。

PostLogStoreLogs

调用PostLogStoreLogs接口向指定的Logstore中写入日志数据。接口说明 已创建并获取AccessKey。更多信息,请参见 访问密钥。阿里云账号AccessKey拥有所有API的访问权限,风险很高。强烈建议您创建并使用RAM用户进行API访问或日常运维。RAM...

OSS访问日志分析

您可以通过日志服务SLS存储和分析OSS日志数据,也可以将OSS日志数据导出并存储到指定的OSS目录长期保存,然后通过数据湖分析服务对长期保存的OSS日志数据进行分析。通过数据湖分析服务(Data Lake Analytics,DLA)分析OSS日志数据前,您...

SLS的OSS投递数据

本文介绍如何通过向导创建SLS的OSS投递数据源发现任务,自动发现您当前区域下所有的Logstore投递到OSS的日志数据(包括新增的投递到OSS的日志数据,以及增量的分区及数据),并自动创建DLA库表映射到投递的OSS日志数据上。前提条件 当前...

消费-搭建监控系统

日志服务是阿里云一个重要的基础设施,支撑着阿里云所有集群日志数据的收集和分发。众多应用比如OTS、ODPS、CNZZ等利用日志服务logtail收集日志数据,利用API消费数据,导入下游实时统计系统或者离线系统做分析统计。作为一个基础设施,...

操作审计

数据管理DMS基于操作日志的基础功能,重磅推出了操作审计功能。当您需要快速排查、定位数据库安全问题及有安全审计用途时,可使用操作审计查看在SQL窗口产生的SQL语句列表、工单列表、登录列表、操作日志。功能说明 数据管理DMS的操作审计...

应用场景

数据库审计服务支持对阿里云原生数据库(例如RDS云数据库)及自建数据库(例如ECS自建数据库)进行适配审计,满足您对数据审计及日志数据留存的要求。RDS云数据库审计 通过在用户PC(该PC通过数据库运维工具直接连接RDS数据库)或访问数据...

PutLogs

接口说明 服务端会对每次PutLogs写入的日志数据做格式检查,只要日志数据中有任何一条日志不符合规范,则整个请求失败且无任何日志数据成功写入。目前仅支持写入 PB格式 的日志数据日志数据以LogGroup的形式展示。日志数据写入时有两种...

如何解决查询分析与流处理两种场景下的数据口径差异

当一条日志数据到达日志服务时,日志服务将日志时间(字段名称为_time_)和到达时间(字段名称为_tag_:_receive_time_)做差,日志服务通过计算它们之间的差值把日志分为如下两类:如果差值位于(-180,900](单位:秒)范围内,说明是实时...

同步时源库为Db2 for LUW的注意事项及限制

说明 如为增量同步任务,DTS要求源数据库的数据日志保存24小时以上,如为全量同步和增量同步任务,DTS要求源数据库的数据日志至少保留7天以上(您可在全量同步完成后将数据日志保存时间设置为24小时以上),否则DTS可能因无法获取数据日志...

简介

阿里云日志服务提供服务日志功能,支持记录Project内的用户操作日志等多种日志数据,并提供多种分析维度的仪表盘。您可以通过多种方式实时掌握日志服务的使用状况、提高运维效率。默认配置 默认配置项 配置内容 Logstore 当前Project产生的...

日志服务监控审计

服务日志 日志服务提供服务日志功能,支持记录Project内的用户操作日志等多种日志数据,并提供多种分析维度的仪表盘。您可以通过多种方式实时掌握日志服务的使用状况、提高运维效率。当前Project产生的所有日志数据都会被分类保存到特定的...

通过日志服务迁移日志数据至MaxCompute

本文为您介绍如何通过日志服务的直接投递功能迁移日志数据至MaxCompute。前提条件 执行本操作的账号为主账号。已开通日志服务,详情请参见 开通日志服务。背景信息 日志服务提供将实时采集的日志数据投递至MaxCompute的功能。如果启用该...

ActionTrail日志清洗

DLA提供ActionTrail日志自动清洗解决方案,可以将ActionTrail投递到OSS的日志文件转换为DLA中可以直接查询的数据表,同时自动对数据进行分区和压缩,方便您分析和审计对云产品的操作日志日志分析痛点 ActionTrail是阿里云提供的云账号...

pull_log_dump

调用CLI命令并发下载大量日志数据到本地文件。请求语法 aliyunlog log pull_log_dump-project_name=<value>-logstore_name=<value>-from_time=<value>-to_time=<value>-file_path=[-batch_size=][-compress=][-encodings=][-shard_list=][-...

快速使用WAF日志服务

Web应用防火墙(Web Application Firewall,简称WAF)日志服务通过阿里云日志服务实时地采集已接入WAF防护的网站业务的全量日志,并对采集到的日志数据进行查询与分析,以丰富的仪表盘形式展示查询结果,满足等保合规要求和网站业务的防护...

使用前须知

阿里云日志服务和友盟联合推出实时日志订阅功能,将友盟数据开放平台U-DOP的各类明细数据一键实时同步至日志服务,实现日志实时查询、可视化分析、告警、投递、加工等操作。本文介绍友盟相关日志的资源说明、费用说明和使用限制。资源说明 ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 日志服务 云数据库 RDS 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用