全局二级索引
每个GSI对应一张分布式索引表，和其他分布式表一样，按照指定的分区规则水平拆分为多张物理表。PolarDB-X 使用分布式事务维护主表和索引表之间数据强一致。全局二级索引还支持以下特性：支持选择覆盖列，减少回表操作开销。在线表结构变更...
ClickHouse
Boolean 否 false 参数取值如下：false（默认值）：如果是写ClickHouse分布式表，并且在参数url中只指定了一个节点，则不会尝试推测分布式表对应的本地表信息，而是依然会直接写入分布式表，再由分布式表写入对应的本地表。true：Flink将...
社区兼容版集群变配和水平扩缩容
检测失败原因有以下两种：缺失唯一的分布式表：表示本地表没有创建分布式表，需要再创建一个对应的分布式表。对应的分布式表不唯一：表示本地表有不止一个分布式表，请删除多余的分布式表，仅保留一个即可。在 变配 或 降配 页面，根据您的...
云数据库ClickHouse集群间的数据迁移
本地表和分布式表检测 如果存在本地表没有创建分布式表或者分布式表不唯一，则校验失败。请删除多余的分布式表。迁移任务完成后，在 实例迁移 页面查看迁移任务。说明 当迁移任务的 迁移状态 为 已完成 时，说明源集群的数据已成功迁移至...
总体流程
创建表：以创建与On Time数据集类型对应的表为例，介绍如何使用DMS在已创建的数据库中创建本地表和分布式表。导入数据：以导入On Time数据集至已创建的分布式表为例，介绍如何使用客户端clickhouse-client工具导入数据到 云数据库...
CREATE TABLE
创建分布式表 分布式表是本地表的集合，它将多个本地表抽象为一张统一的表，对外提供写入、查询功能。当数据写入分布式表时，会被自动分发到集合中的各个本地表中。当查询分布式表时，集合中的各个本地表都会被分别查询，并且把最终结果...
基本概念
分布式表（Distributed Table）本地表的集合，它将多个本地表抽象为一张统一的表，对外提供写入、查询功能。当写入分布式表时，数据会被自动分发到集合中的各个本地表中；当查询分布式表时，集合中的各个本地表都会被分别查询，并且把最终...
升级内核大版本
本地表和分布式表检测 如果存在本地表没有创建分布式表或者分布式表不唯一，则校验失败。请删除多余的分布式表。迁移任务完成后，在 实例迁移 页面查看迁移任务。说明 当迁移任务的 迁移状态 为 已完成 时，说明源集群的数据已成功迁移至...
从MySQL导入数据
说明 如果您导入的是本地表，请将查询语句中的分布式表名 clickhouse_test_table_distributed 更换为本地表名 clickhouse_test_table，再进行查询。查询结果如下。数据类型映射 RDS MySQL或PolarDB MySQL类型 ClickHouse类型 Unsigned ...
创建表
分布式表（Distributed tables）是虚拟的表，不直接存储任何数据，而是作为一个查询层，将查询分发到一个或多个节点上的本地表，并汇总返回结果。分布式表适用于在ClickHouse集群环境中实现数据分布查询和处理。语法：CREATE TABLE[db.]d_...
从Kafka同步数据
说明 如果您同步的目的表是本地表，请将查询语句中的分布式表名更换为本地表名，再进行查询。查询结果如下。id─┬─name─┐│1│a│2│b│└─┴─┘说明 当您执行查询语句并成功返回结果时，说明数据已从Kafka同步至 云数据库ClickHouse...
2022-03-04版本
通过对分布式表的本地表进行直接写入的方式，可以显著提高写ClickHouse分布式表的吞吐量。ClickHouse结果表 优化作业诊断规则和界面 新增20多种诊断规则，全面分析作业的运行状态。根据作业的实际情况，给出高、中、低三种风险等级提示。...
常见问题
如何处理建表后查询表不存在？为什么Kafka外表建表后数据不增加？为什么客户端看到的时间结果和时区显示的不一样？为什么数据写入后不可见？为什么optimize任务很慢？为什么optimize后数据仍未主键合并？为什么optimize后数据TTL仍未生效？...
Multi-Master关键技术介绍
本文对Multi-Master架构的关键技术点进行介绍，包括分布式事务处理、全局死锁处理、DDL支持、分布式表锁支持、集群容错和高可用能力。分布式事务管理 AnalyticDB PostgreSQL版 分布式事务 AnalyticDB PostgreSQL版 通过二阶段提交协议（2PC...
术语表
AUTO表 AUTO模式数据库中，建表时未使用PARTITION语法的表称为AUTO表，AUTO表是分布式的。分区表 AUTO模式数据库中，创建表时使用了 PARTITION 语法的表称为分区表。表组（Table Group）AUTO模式数据库中，为了尽可能避免跨机器查询，提高...
MySQL分库分表同步至Hologres（方案1.0）
将分表数据写入目标单表：将源表满足 t_order.*正则表达式的表数据写入到Hologres名为 t_order 的表中，所有满足 t_user.*正则表达式的表数据写入到Hologres名为 t_user 的表中。为表加上统一前缀：在目标名前统一加上 cdo_前缀。schema：...
表值函数
SELECT rs.COLUMN_VALUE my_string FROM TABLE(get_random_str(5))rs 返回结果如下：my_string-JAFSOSYOUA VNWSAAAHNA MAEDHVHLIU PRWUJLPKZJ MWZKQZKQJZ(5 行记录)调用 get_random_str 表值函数，显式指定表值函数的参数值 count_in，返回...
MySQL分库分表同步至Hologres（方案2.0）
将分表数据写入目标单表：将源表满足 t_order.*正则表达式的表数据写入到Hologres名为 t_order 的表中，所有满足 t_user.*正则表达式的表数据写入到Hologres名为 t_user 的表中。为表加上统一前缀：在目标名前统一加上 cdo_前缀。schema：...
Hologres整库周期性增全量同步至MaxCompute
结构迁移中包含目标表的创建方式（已有表/自动建表），如果是自动建表，则会为您展示建表的DDL。全量同步中包含离线同步的表信息、同步的进度、以及写入的条数。增量同步中包含周期任务对应的最新周期实例的相关指标信息。任务重跑 直接重...
AnalyticDB for MySQL3.0整库周期性增全量同步至...
结构迁移中包含目标表的创建方式（已有表/自动建表），如果是自动建表，则会为您展示建表的DDL。全量同步中包含离线同步的表信息、同步的进度、以及写入的条数。增量同步中包含周期任务对应的最新周期实例的相关指标信息。任务重跑 直接重...
镜像检测修复建议（Windows）
当通过镜像检测功能检测出Windows操作系统磁盘上有残留驱动项、系统中存在残留Xen驱动或者存在禁止安装驱动属性设置等异常检测项时，您可以参考本文的操作指导进行修复。清理注册表残留驱动 HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\...
镜像检测修复建议（Windows）
当通过镜像检测功能检测出Windows操作系统磁盘上有残留驱动项、系统中存在残留Xen驱动或者存在禁止安装驱动属性设置等异常检测项时，您可以参考本文的操作指导进行修复。清理注册表残留驱动 HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\...
流控规则参数说明
目前已支持下面的表达式：表达式 说明 备注 args0 当前参数的值 无 args0.name 参数的name属性 会翻译成Java语句：arg.getName()。args0.isEnabled()参数的enabled属性，是一个bool类型。Java规范里，bool类型的getter格式是 isXXX()。args...
MySQL整库周期性增全量同步至Hive
此操作会影响通过数据集成新建表的表结构，已有表的表格式不受影响。新建表存储方式：可以选择 内表、外表，决定新建目标表格式是内表还是外表。新建表格式：可以选择 parquet、orc、txt,决定新建目标表的存储格式。写入模式：决定任务在...
IO加速
适用场景 下列是一些IO加速功能适用的业务场景：排序、分组聚合、联合等产生临时结果的复杂操作 使用CTE通用表达式的递归查询 无法使用适当索引的复杂查询 对大表或多个表的分析型查询 其他使用临时表的工作负载 支持范围 满足以下条件的...
概述
SELECT 命令的一般语法是[WITH with_queries]SELECT select_list FROM table_expression[sort_specification]下面几个小节描述选择列表、表表达式和排序声明的细节。WITH 查询等高级特性将在最后讨论。一个简单类型的查询的形式：SELECT*...
离线同步能力说明
示例：创建一个离线同步任务，每天从源MySQL订单表中同步前一天新产生的订单数据到MaxCompute目标表的当天分区，原表订单的创建时间字段为 gmd_created,目标odps表的分区字段为 ds，可以将任务配置如下：同步任务配置：调度参数配置：订单...
逻辑表表达式
本文介绍在新建逻辑表时，输入逻辑表表达式的规则。简单规则 规则 举例说明 自然序 test_[0-7]：创建8张表。自然对齐序 test_[00-07]：创建8张表，表名两位对齐。test_[000-007]：创建8张表，表名三位对齐。test_[0000-0007]：创建8张表，...
逻辑表结构设计
数据管理DMS提供的结构设计功能，可以实现对目标库表进行符合研发规范的表结构设计。您可按需自定义不同业务线的研发流程，保障多套环境（例如开发环境、测试环境、生产环境）之间结构的一致性。本文介绍逻辑表结构设计的方法。背景信息 分...
表分区
分区可以使用表继承来实现，这能够带来一些声明式分区不支持的特性，例如：对声明式分区来说，分区必须具有和分区表正好相同的列集合，而在表继承中，子表可以有父表中没有出现过的额外列。表继承允许多继承。声明式分区仅支持范围、列表...
表批读写
与不指定路径的内部表不同，当您使用DROP表时，不会删除外部表的文件 如果运行CREATE TABLE的位置已经包含使用Delta Lake存储的数据，Delta Lake将执行以下操作：如果只指定表名和位置，例如：SQL%sql CREATE TABLE events USING DELTA ...
CREATE TABLE
CREATE TABLE 用于在当前数据库中创建一个新的、初始为空的表。简介 CREATE TABLE 将在当前数据库中创建一个新的、初始为空的表。该表将由发出该命令的用户所拥有。如果给定了一个模式名（例如 CREATE TABLE myschema.mytable.），那么该表...
表表达式
最简单的表表达式只是引用磁盘上的一个表，一个所谓的基本表，但是我们可以用更复杂的表表达式以多种方法修改或组合基本表。表表达式里可选的 WHERE、GROUP BY 和 HAVING 子句指定一系列对源自 FROM 子句的表的转换操作。所有这些转换最后...
表表达式
表表达式 计算一个表。该表表达式包含一个 FROM 子句，该子句后面可以根据需要选用 WHERE、GROUP BY 和 HAVING 子句。最简单的表表达式只是引用磁盘上的一个表，一个所谓的基本表，但是我们可以用更复杂的表表达式以多种方法修改或组合基本...
选择列表
简介 如前面的小节说明的那样，在 SELECT 命令里的表表达式构造了一个中间的虚拟表，方法可能有组合表、视图、消除行、分组等等。这个表最后被选择列表传递下去处理。选择列表判断中间表的哪个 列 是实际输出。选择列表项 最简单的选择列表...
ALTER PARTITION TABLE
不要求与父表一致：即对应的属性分区子表可以与父表不一致，如果子表没有显式指定属性，则会继承父表的属性，若是子表显式指定属性，则会保留子表的属性。索引列必须包含父表的索引列：即分区子表的索引列必须包含父表的索引列，还能显式再...
逻辑表
配置完逻辑库后，系统会自动解析逻辑库中符合条件的物理表，生成逻辑表，您也可以手动更新逻辑表。本文介绍生成逻辑表的规则和手动更新逻辑表的方法。前提条件 已配置逻辑库。更多信息，请参见 逻辑库。逻辑库中有多张表结构相同且表名前缀...
公用表表达式
AnalyticDB PostgreSQL版 7.0版本增强了公用表表达式（Common Table Expression，简称CTE）功能，支持对CTE语句指定MATERIALIZED或NOT MATERIALIZED，可以更好地控制执行计划，能够有效提升SQL性能。功能简介 CTE可以在单个语句的执行范围...
CREATE PARTITION TABLE
不要求与父表一致：即对应的属性分区子表可以与父表不一致，如果子表没有显式指定属性，则会继承父表的属性，若是子表显式指定属性，则会保留子表的属性。索引列必须包含父表的索引列：即分区子表的索引列必须包含父表的索引列，还能显式再...
使用Hybrid Plan加速宽表查询
本文介绍了使用Hybrid Plan加速宽表查询的技术原理、适用场景、使用限制以及性能测试等内容。技术原理 在查询大宽表时，若对少数列通过WHERE或JOIN条件进行过滤，或查询TOP K，最后输出筛选出来的行的所有详细信息。对于这类查询，使用列存...
- 产品推荐
- 这些文档可能帮助您