常见报错
报错概览 配置备份计划时常见报错 源库测试连接失败 备份恢复预检查时常见报错 源库连接性检查失败 数据库权限检查失败 OSS检查失败 源库binlog开启检查失败 源库binlog模式检查失败 源库binlog_row_image是否为FULL检查失败 源库server_id...
数据膨胀、倾斜与索引统计
是否是分区表 表是否为分区表。表名 表的名称。索引大小 索引的大小，单位为Byte。索引扫描次数 索引扫描总次数。索引扫描行数 索引扫描总行数。索引名 索引名称。上次诊断时间 最近一次发起诊断的时间。说明 智能诊断会定期在后台每小时...
Stage级别诊断结果
较大的数据量被广播 Stage输入数据倾斜 Stage输出数据倾斜 较大的数据量被广播 问题 广播（Broadcast）是在两个相邻的Stage间，上游向下游Stage传输数据时所用的一种方法（更多详情，请参见 数据输出类型）。如果某个Stage广播了较多数据，...
Tablestore Stream配置同步任务
Tablestore Stream插件主要用于导出Tablestore增量数据，本文将为您介绍如何通过Tablestore Stream配置同步任务。背景信息 Tablestore Stream插件与全量导出插件不同，增量导出插件仅支持多版本模式，且不支持指定列。增量数据可以看作操作...
租户参数列表说明
sql_mode 设置 SQL 模式，不同的 SQL 模式对于数据库行为有很大影响。optimizer_use_sql_plan_baselines 是否使能使用 SQL 计划基线。sql_warnings 出现告警时单行 INSERT 语句是否生成信息字符串。ob_default_replica_num 每个集群中表的...
空间管理
数据库自治服务DAS 为 RDS SQL Server 提供空间管理功能，可以分层监控与分析，从实例深入到数据库，再从数据库深入到表，帮助用户发现和定位数据库空间相关问题。空间管理提供您查看实例基本信息、空间总览、空间数据图表信息、空间变化...
空间管理
自治服务的空间管理功能提供分层的监控与分析，从实例深入到数据库，再从数据库深入到表，帮助用户发现和定位数据库空间相关问题。空间管理提供您查看实例基本信息、空间总览、空间数据图表信息、空间变化趋势等等，帮助您从各个维度了解...
查询一个DTS任务详情
Dml Boolean true 订阅数据是否包含DML语句，返回值：true：是。false：否。Ddl Boolean true 订阅数据是否包含DDL语句，返回值：true：是。false：否。SubDistributedJob Array of SubDistributedJob 分布式子任务的信息，如主任务不是...
FE参数配置
default_db_data_quota_bytes 默认值：1 PB 是否可以动态配置：true 是否为Master FE节点独有的配置项：true 说明：用于设置默认数据库数据配额大小，设置单个数据库的配额大小可以使用：设置数据库数据量配额，单位为B/K/KB/M/MB/G/GB/T/...
概览
集群管理系统的概览页面提供了 云原生多模数据库 Lindorm 实例宽表引擎中所有表的详细信息，包括表的大小、分片情况、数据预览、表结构、限流信息等。本文介绍如何通过集群管理系统管理宽表。前提条件 已登录目标实例的集群管理系统，具体...
查询按照SQL ID维度统计的全量请求数据
调用GetPfsSqlSummaries接口，查询数据库实例性能洞察（新版）中按照SQL ID维度的全量请求数据。接口说明 使用该接口需满足以下前提条件：使用阿里云或 DAS 的 SDK 时，建议使用最新版本。在使用 SDK 调用 DAS 服务时，需要将地域指定为 ...
离线同步常见问题
使用lindorm bulk方式写入数据，是否每次都会替换掉历史数据？如何查询一个ES索引下的所有字段？MongoDB Reader是否大小写敏感？怎么配置MongoDB Reader超时时长？向包含主键自增列的目标表写入数据，需要如何配置OTS Writer？在时序模型的...
大数据AI公共数据集分析
本教程通过DataWorks，联合云原生大数据计算服务MaxCompute，使用大数据AI公共数据集（淘宝、飞猪、阿里音乐、Github、TPC等公共数据），指导您如何快速进行大数据分析，快速熟悉DataWorks的操作界面与最基础的数据分析能力。DataWorks的更...
GetAutoThrottleRules-获取自动SQL限流规则
获取指定数据库实例的自动SQL限流规则。接口说明 使用该接口需满足以下前提条件：在使用 SDK 调用 DAS 服务时，需要将地域指定为 cn-shanghai。目标数据库实例为：RDS MySQL 5.6、5.7、8.0 高可用系列、三节点企业系列。PolarDB MySQL 版 5...
数据库代理常见问题
购买只读实例做读写分离后，主实例的历史数据是否会自动同步到只读实例？数据库代理中的连接池与应用程序中的连接池有什么区别，应该如何结合使用？为什么查询时会出现乱码？DDL操作是否会自动从主库同步到从库?什么是数据库代理？数据库...
多值数据写入
时序多值模型 多值的模型是针对数据源建模，我们每一行数据针对的是一个数据源，它的被测量的多个指标在同一行上，所以每一个数据源，数据的来源在每一个时间点上都有一行，这就是多值的模型。比如某个机器的cpu，mem和load指标。每次是...
创建GreenPlum数据源
通过创建GreenPlum数据源能够实现Dataphin读取GreenPlum的业务数据或向GreenPlum写入数据。本文为您介绍如何创建GreenPlum数据源。背景信息 Greenplum是一款大数据分析引擎，作用于分析、机器学习和AI等领域。其架构主要针对管理大规模分析...
查询DTS任务列表及各任务执行详情
DataInitialization Boolean true 是否执行全量数据迁移或全量数据初始化，返回值：true：是。false：否。DataSynchronization Boolean true 是否执行增量数据迁移或同步，返回值：true：是。false：否。StructureInitialization Boolean ...
创建GreenPlum数据源
通过创建GreenPlum数据源能够实现Dataphin读取GreenPlum的业务数据或向GreenPlum写入数据。本文为您介绍如何创建GreenPlum数据源。背景信息 Greenplum是一款大数据分析引擎，作用于分析、机器学习和AI等领域。其架构主要针对管理大规模分析...
查询结果不符合预期的常见原因
Lindorm宽表经常会被应用在大数据链路中，如果写入链路出现问题，则可能导致写入延迟或无法正常写入数据，此时进行数据查询，该行数据还未写入，因此会产生无法查询到数据的情况。如果您在使用中遇到数据写入一段时间后才能查到的情况，...
实时消费Kafka数据
当您需要将Kafka数据写入 云原生数据仓库AnalyticDB PostgreSQL版，且不希望使用其他数据集成工具时，可以通过实时数据消费功能直接消费Kafka数据，减少实时处理组件依赖，提升写入吞吐。Apache Kafka是一个容错、低延迟、分布式的发布-...
写入数据
请求内容 数据点格式为 JSON 格式，各参数说明如下：名称 类型 是否必需 是否有使用限制 描述 举例 metric String 是 只可包含大小写英文字母、中文、数字，以及特殊字符-_./():,[]=‘#存储的指标名 sys.cpu。说明 高可用版本支持的metric...
分区索引
分区索引是为了解决大宽表的存储和高并发访问问题而设计的一种新特性。创建搜索索引时可以指定数据分区策略，服务端自动将数据进行拆分并存储，查询数据时系统自动进行分区裁剪。本文介绍数据分区的策略和使用方法。前提条件 已开通 云原生...
DataHub数据源
DataHub数据源作为数据中枢，为您提供读取和写入DataHub数据库的双向通道，能够快速解决海量数据的计算问题。本文为您介绍DataWorks的DataHub数据同步的能力支持情况。支持的版本 DataHub Reader通过DataHub的Java SDK读取DataHub中的数据...
Reserve参数说明
在调用部分接口配置或查询迁移或同步、订阅任务时，您需要配置或查询预留参数Reserve（数据类型为字符串String，传入格式为JSON）来完善或查看源或目标实例的配置信息（比如目标Kafka集群的数据存储格式、云企业网CEN的实例ID）。...
OGG插件介绍
configure 名称 默认值 是否必须 描述 batchSize 1000 可选 上传到datahub,一批的最多纪录数 batchTimeoutMs 5000 可选 数据量小于batchSize最长等待时间，最小1000,单位：毫秒 dirtyDataContinue false 可选 脏数据是否继续 dirtyDataFile...
数据缓存
本文介绍 云数据库 SelectDB 版 中湖仓一体相关的数据缓存功能（File Cache），帮助您对外部数据源进行高效的联邦分析。概述 File Cache通过缓存最近访问的远端存储系统（HDFS或对象存储）的数据文件，可加速后续访问相同数据的查询。在...
配置DataHub输出组件
配置DataHub输出组件，可以将外部数据库中读取数据写入到DataHub，或从大数据平台对接的存储系统中将数据复制推送至DataHub，进行数据整合和再加工。本文为您介绍如何配置DataHub输出组件。前提条件 已创建DataHub数据源。具体操作，请参见...
风险识别管理（新版）
规则名称 规则类型 规则等级 规则配置 非工作时间查询大数据量敏感数据 数据访问风险 低 如下时间段查询数据量大于10000时命中该规则。周一至周五：22:00～24:00。周六至周日：00:00～24:00。相似SQL查询 数据访问风险 低 十分钟内查询相似...
配置DataHub输出组件
配置DataHub输出组件，可以将外部数据库中读取数据写入到DataHub，或从大数据平台对接的存储系统中将数据复制推送至DataHub，进行数据整合和再加工。本文为您介绍如何配置DataHub输出组件。前提条件 已创建DataHub数据源。具体操作，请参见...
UpdateBackupPolicy
IsCrossRegionDataBackupEnabled Boolean 否 false 是否开启跨地域数据备份，默认为false。IsCrossRegionLogBackupEnabled Boolean 否 false 是否开启跨地域日志备份，默认为false。DestCrossRegion String 否 cn-shanghai 跨地域备份的...
管理健康报告
更进一步的，您可以从不同的查询类型中识别共性，看是否需要创建物化视图来加速对这张表中数据的查询。Tablet数据大小变异系数 是指同一个分区内的tablet数据大小变异系数，代表了一个表的数据的tablet分布均衡程度。计算方式为：同一个...
冷热分离
背景信息 在海量大数据场景下，一张表中的部分业务数据随着时间的推移仅作为归档数据或者访问频率很低，同时这部分历史数据体量非常大，比如订单数据或者监控数据，降低这部分数据的存储成本将会极大的节省企业的成本。因此，如何以极简的...
CreateProject-创建项目
设置为 true，表示选择忽略：当目标端表对象存在数据时，如果原数据与写入数据冲突，数据传输采用将冲突数据记录日志，保留原数据不变的策略进行数据写入。注意 选择忽略，全量校验将使用 IN 模式拉取数据，无法校验目标端多数据的场景，...
常见问题
删除增量同步任务源库中的数据，目标库中已同步的数据是否会删除？若增量同步任务所需同步的DML操作没有勾选 delete，则目标库中数据不会被删除，否则目标库中已同步的数据会被删除。Redis间的同步，目标Redis实例的数据会被覆盖么 相同Key...
常见问题
A：这是因为主表和索引表的冷数据归档过程是独立的，并且归档主表和索引表冷数据的操作是周期性触发的，导致了主表和索引表滞留在热存储的数据不一致，进而出现查询到的冷数据不一致的现象。您可以在查询条件中添加热数据的时间范围，避免...
基本概念
数据资产：数据资源平台中存在大量的数据表、标签、API等各类数据资产，数据管理者通过数据汇聚、数据治理、数据分析后，需要对整个平台数据进行统一管控，了解平台的核心数据资产，提供对应的数据资产管理规范。统一服务 应用：是调用API...
数据库代理常见问题
不会 数据库代理地址和常规地址是否是一个地址？不是。常规地址：正常的业务读写地址，通过该地址发送的所有请求只会路由到该实例。数据库代理地址：可根据用户的SQL请求，自动判断读请求或写请求，并分发到主实例或只读实例，实现读写分离...
导入概述
为了更好地满足各种不同的业务场景，StarRocks支持多种数据模型，StarRocks中存储的数据需要按照特定的模型进行组织。本文为您介绍数据导入的基本概念、原理、系统配置、不同导入方式的适用场景，以及一些最佳实践案例和常见问题。背景信息...
参数设置
您可以在控制台上查看 PolarDB-X 1.0 实例和数据库相关的参数说明，还可以自定义修改这些参数值。注意事项 只读实例仅支持设置 数据库级 参数，不支持 实例级 的参数设置。部分参数仅支持特定的实例版本，详情请参见 参数说明。参数说明 ...
- 产品推荐
- 这些文档可能帮助您