自建SQL Server同步至云原生数据仓库 AnalyticDB ...
单个数据库执行日志备份操作的频率超过1次/小时。单个数据库执行DDL操作的频率超过100条/小时。单个数据库的日志量超过20 MB/s。需要开启CDC（Change Data Capture，变更数据捕获）的表超过1000个。注意事项 说明 在库表结构同步过程中，...
日志说明
日志格式：日志输出时间应用名称,traceId,RpcId,SQL 语句,执行结果（success/failed),执行耗时（ms）,连接建立时间,数据库执行时间,当前线程名 日志示例：2019-01-0318:12:33.541,xxx,0a0fe91c1514974353459100919649,0.1,select*from test...
通过Mongo Shell管理数据库账号
roles":[{"role":"readAnyDatabase","db":"admin"}]} 查询目标数据库的所有数据库账号 说明 您可以通过 use database_name 命令切换数据库，其中 database_name 为目标数据库的名称。方式一：在目标数据库执行查询命令。show users 说明 ...
使用RDS内网地址访问RDS MySQL数据库
当您的数据分散存储在日志服务Logstore和RDS MySQL数据库中时，您可以通过日志服务数据加工功能从对应数据库获取数据，实现数据富化。本文介绍如何配置数据加工规则及高级参数，实现通过RDS内网地址访问RDS MySQL数据库获取数据。背景信息 ...
日志（Log）
格式 文本日志（LogFile）、事件（Event）、数据库日志（BinLog）、时序数据（Metric）等数据都是日志的不同载体。日志服务采用半结构化的数据模式定义一条日志，包含日志主题、日志时间、日志内容、日志来源和日志标签五个数据域。日志...
RDS SQL Server如何收缩事务日志
日志空间充足 如果日志空间充足，可以通过RDS控制台备份并收缩事务日志功能来处理，该功能是指系统将自动通过执行日志备份和日志收缩操作来管理和优化事务日志文件的大小。访问 RDS实例列表，在上方选择地域，然后单击目标实例ID。在左侧...
离线同步日志分析
DataStudio界面 您可以在 运行历史 页面查看任务3天内的执行日志。查看离线同步日志 下图为任务的执行过程中的简单日志信息。您也可以单击图中区域①或⑤的链接查看各阶段执行过程的详细日志信息。区域 参数 说明 提交实例（区域①）SUBMIT...
SQL洞察
功能说明 SQL审计日志 记录对数据库执行的所有操作。通过审计日志记录，您可以对数据库进行故障分析、行为分析、安全审计等操作。增强搜索 可以按照数据库、用户、客户端IP、线程ID、执行耗时、执行状态等进行多维度检索，并支持导出和下载...
SQL洞察
功能说明 SQL审计日志 记录对数据库执行的所有操作。通过审计日志记录，您可以对数据库进行故障分析、行为分析、安全审计等操作。增强搜索 可以按照数据库、用户、客户端IP、线程ID、执行耗时、执行状态等进行多维度检索，并支持导出和下载...
使用前须知
日志服务联合云数据库PolarDB推出CloudLens for PolarDB，用于集中管理PolarDB MySQL集群以及采集PolarDB MySQL集群的慢查询日志、错误日志、审计日志和性能指标。本文介绍CloudLens for PolarDB的功能、资产、费用、使用限制等信息。产品...
SQL洞察和审计
数据库自治服务DAS（Database Autonomy Service）提供SQL洞察和审计功能，为您的数据库提供安全审计、性能诊断等增值服务。前提条件 数据库引擎为 PolarDB PostgreSQL版。重要 DAS从2023年02月24日起，逐步支持 PolarDB PostgreSQL版 的SQL...
CreateStoreView-创建数据集
my_storeview storeType string 是 数据集类型，支持两种类型，当创建时序库数据集时 storeType 指定为 metricstore，当创建日志库数据集时，storeType 指定为 logstore。logstore stores array 是 日志库或者时序库列表。StoreViewStore ...
日志字段详情
本文介绍函数计算执行日志的字段详情。参数 说明_topic_日志主题，此处与服务名一致 functionName 函数名 message 记录日志信息 qualifier 服务版本的别名 serviceName 服务名 versionId 服务版本号
云产品日志概述
用户风险分析 数据库审计 审计日志 会话日志 Project：数据库审计实例ID Logstore：新版本 dbaudit-audit2-数据库审计实例ID dbaudit-session2-数据库审计实例ID 老版本 dbaudit-audit-数据库审计实例ID dbaudit-session-数据库审计实例ID ...
从自建Oracle迁移至阿里云RDS MySQL
数据库 结构迁移 全量迁移 增量数据迁移 自建Oracle数据库 Schema的Owner权限 Schema的Owner权限 DBA RDS MySQL 或RDS MySQL Serverless 实例 待迁入数据库的写权限 待迁入数据库的写权限 待迁入数据库的写权限 数据库账号创建及授权方法：...
从自建Oracle迁移至云原生数据仓库AnalyticDB ...
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，您需要在执行数据迁移前评估数据迁移对源库和目标库性能的影响，同时建议您在业务低峰期执行数据迁移。对于迁移失败的任务，DTS会触发...
创建Oracle数据订阅通道
自建Oracle数据库已开启ARCHIVELOG（归档模式），设置合理的归档日志保持周期且归档日志能够被访问，详情请参见 ARCHIVELOG。注意事项 由于使用gh-ost或pt-online-schema-change等类似工具执行在线DDL变更不会被订阅到，客户端在将消费到的...
回收磁盘碎片以提升磁盘利用率
在删除云数据库MongoDB实例的数据后，这些被删除数据使用的存储空间会被标记为空闲，随后写入的新数据可能会被直接存储到这部分空闲的存储空间中，也可能会先扩展文件的存储空间再存储到文件末尾。上述情况将导致一部分空闲的存储空间不会...
使用前须知
阿里云关系型数据库RDS联合日志服务推出RDS SQL审计日志投递功能，将RDS SQL审计日志投递到日志服务中。日志服务提供实时查询、可视化分析、告警、投递、加工等功能。本文介绍RDS SQL审计日志相关的资产详情、费用说明、使用限制等信息。...
新功能发布记录
2022-09-14 全部地域 过滤日志 2022年8月 功能名称 功能描述 发布时间 支持地域 相关文档 导入MySQL Binlog 您可以将自建MySQL数据库或RDS MySQL数据库中的Binlog导入到 日志服务，实现数据的查询分析、加工等操作。2022-08-23 部分地域 ...
云产品日志通用操作
您在各个云产品控制台开通日志功能后，即可执行日志服务相关操作。常用操作 采集到云产品日志后，您可以执行如下操作。操作 说明 查询和分析日志 查询和分析日志。具体操作，请参见 查询和分析日志。查询和分析时序数据 查询和分析时序数据...
查看数据报表
CloudLens for Redis提供丰富的可视化图表，用于展示云数据库Redis日志的分析结果。前提条件 已开启日志采集功能。具体操作，请参见 开启日志采集功能。功能入口 登录 日志服务控制台。在 日志应用 区域的 云产品Lens 页签中，单击 ...
采集脚本执行日志
本文介绍如何通过日志服务控制台创建Logtail采集配置来采集脚本执行日志。前提条件 已在服务器上安装Linux Logtail 1.7.1及以上版本。具体操作，请参见 安装Logtail（Linux系统）。功能说明 Logtail通过配置的用户，调用配置的脚本命令，...
使用前须知
阿里云函数计算服务联合日志服务推出函数执行日志查询分析功能，支持将函数调用日志存储到日志服务Logstore中，您可以进行代码调试、故障分析、数据分析等操作。本文介绍函数计算服务日志功能所涉及的资产详情、费用说明、使用限制等信息。...
WAL日志并行回放
因此，PolarDB 数据库在Standby节点持续回放WAL日志过程中，引入了上述并行任务执行框架，并结合LogIndex数据将WAL日志的回放任务并行化，提高了Standby节点数据同步的速度。工作流程 Startup进程：解析WAL日志后，仅构建LogIndex数据而不...
WAL日志并行回放
因此，PolarDB 数据库在Standby节点持续回放WAL日志过程中，引入了上述并行任务执行框架，并结合LogIndex数据将WAL日志的回放任务并行化，提高了Standby节点数据同步的速度。工作流程 Startup进程：解析WAL日志后，仅构建LogIndex数据而不...
开通日志实时查询功能
您在执行日志查询分析前，需先开通日志实时查询功能。本文介绍如何在OSS控制台上开通日志实时查询功能。前提条件 已创建OSS Bucket。具体操作，请参见 控制台创建存储空间。请确保日志服务Project和OSS Bucket在同一阿里云账号且在同一地域...
迁移Elasticsearch查询方案到日志服务
迁移方案 步骤一：执行日志双写 在迁移过程中，同时使用如下两条链路采集日志，两条链路互不影响。链路1：使用Filebeat采集日志到Elasticsearch。链路2：使用Logtail采集日志到日志服务。将日志采集到日志服务后，继续使用Grafana和Kinbana...
使用前须知
阿里云日志服务与云数据库RDS联合推出CloudLens for RDS。您可以通过CloudLens for RDS实时查看RDS SQL审计日志、错误日志和慢日志的采集状态，集中管理采集配置，并可基于采集到的日志进行后续的审计、分析、告警等操作。产品试用 SLS ...
应用场景
日志服务的典型应用场景包括：数据采集与消费、数据清洗与流计算（ETL/Stream Processing）、数据仓库对接（Data Warehouse）、日志实时查询与分析。数据采集与消费 通过日志服务LogHub功能，可以大规模低成本接入各种实时日志数据（包括...
开启日志采集功能
CloudLens for RDS扮演该角色，执行日志写入操作。自动创建服务关联角色AliyunServiceRoleForSLSAudit。CloudLens for RDS扮演该角色，采集RDS审计日志。更多信息，请参见 管理服务关联角色AliyunServiceRoleForSLSAudit。在 接入管理 页面...
智能异常分析概述
每次执行日志输出语句都包含的部分称为日志常量，例如 connect mysql server,latency ms。日志变量 日志往往由程序中的 logging 语句或者 print 语句产生。例如 connect mysql server,latency 212ms 日志可能是通过日志输出语句 logging....
通过JDBC协议分析日志
日志服务支持您在数据库（例如MySQL）中使用JDBC协议连接日志服务，并通过标准的SQL92语法查询和分析日志。前提条件 已创建阿里云账号或RAM用户的AccessKey。具体操作，请参见 访问密钥。如果使用RAM用户的AccessKey，则RAM用户必须是当前...
常见问题
删除日志库，日志数据是否丢失？日志服务日志保存多长时间？可否修改这个保存时限？希望把日志最终存储到OSS，怎样节省在日志服务上的花费？如何删除日志？删除Project时提示“操作拒绝，权限不足”查询与分析常见问题 日志查询常见问题 ...
数据传输预检查
错误信息 报错原因 解决办法 增量日志参数检查未通过，错误参数 supplemental_log_data_min=no 增量日志参数问题 在目标数据库，执行 alter database add supplemental log data;并重启数据库。增量日志参数检查未通过，错误参数 ...
时序数据对接Grafana
日志服务MetricStore提供了兼容Prometheus的查询接口，您可以直接通过Prometheus数据源方式对接到Grafana进行可视化演示。本文介绍配置Prometheus监控数据为Grafana数据源的操作步骤。前提条件 已安装Grafana。具体操作，请参见 安装...
日志字段详情
字段 说明_topic_日志主题 redis_audit_log：DB节点的审计日志 redis_proxy_audit_log：Proxy节点的审计日志 account 数据库账号名称 command 执行的Redis命令 db 数据库名称 extend_information 附加信息 instanceid Redis实例ID ip IP...
查看会话日志
在数据库审计系统查看到的会话日志来源是日志服务，您可以在日志服务控制台查看和下载数据库审计服务创建的Project和Logstore中记录的会话日志数据。操作步骤 登录 日志服务控制台。在Project列表处，查看数据库审计相关的Project，单击...
使用数据实验室
在 首页 页面的 数据库审计日志 区域，您可以执行查询日志、查看报表、重新导入数据、删除场景等操作。单击 查询分析，进入 查询分析 页面，您可以进行查询分析操作，详情请参见 查询与分析。单击 报表中心，进入 报表中心 页面。默认提供...
API简介
日志库 Logstore 日志库（Logstore）是日志服务中日志数据的采集、存储和查询单元。每个Logstore隶属于一个Project，每个Project中可创建多个Logstore。分区 Shard 日志服务使用Shard控制Logstore或MetricStore的读写数据的能力，数据必定...
- 产品推荐
- 这些文档可能帮助您