分区表扫描算子

然而,PolarDB PostgreSQL版 对分区表的分区数量没有限制,当子分区数量过多时,优化器所使用的时间和SQL执行过程中所使用的内存使用将会急剧增大,与扫描相同大小的普通表相比差距尤为明显。为了解决该问题,PolarDB PostgreSQL版 提供了...

分区表扫描算子

然而,PolarDB PostgreSQL版(兼容Oracle)对分区表的分区数量没有限制,当子分区数量过多时,优化器所使用的时间和SQL执行过程中所使用的内存使用将会急剧增大,与扫描相同大小的普通表相比差距尤为明显。为了解决该问题,PolarDB ...

手动创建分区表(AUTO模式)

DATABASE|CREATE DATABASE|+-+-+|part_db|CREATE DATABASE `part_db`/*MODE='auto'*/|+-+-+1 row in set(0.18 sec)创建数据库的语法详情,请参见 CREATE DATABASE。如果分区表的主键不含分区键,且不是自增主键,需要业务保证主键的唯一性...

应用场景

同时,OceanBase 数据库的分区表方案也可以使得用户完全无需关注数据的分布细节,轻松支持跨分区的分布式事务、多分区的关联,真正实现“透明”访问分布式数据库。会员系统的多维度查询 会员系统在很多企业中也都是存在的,系统中保存了很...

分区表系统视图

PolarDB PostgreSQL版(兼容Oracle)提供了以下几个系统视图和系统函数,供您查看数据库分区表的相关信息。pg_partitioned_table 返回字段说明 列名 描述 partrelid 分区表 pg_class 项的OID。partstrat 分区策略。取值如下:h:哈希分区...

分区表系统视图

PolarDB PostgreSQL版 提供了以下几个系统视图和系统函数,供您查看数据库分区表的相关信息。pg_partitioned_table 返回字段说明 列名 描述 partrelid 分区表 pg_class 项的OID。partstrat 分区策略。取值如下:h:哈希分区表 l:列表...

版本发布说明

修复AUTO模式数据库中分区表的分区列包含反引号字符时,创建表报错的问题。修复在扩缩容或者UGSI创建过程中,insert ignore(returning)可能导致数据校验不通过的问题。修复GSI和Local Index索引名重复的问题。修复创建UGSI时,如果索引名...

TRUNCATE

如果您需要清空分区表中单个或多个分区的数据,请参见 清空分区数据。命令格式 truncate table;参数说明 table_name:必填。待清空数据的非分区表的名称。清空分区数据 清空分区表中指定分区的数据。MaxCompute支持通过条件筛选方式清空...

概述

PolarDB-X对于上述的每一种分区策略下的每一种分区变更的类型,均支持不同变更层级(表级与表组级)、不同变更对象(主表、索引表)的变更:表级:变更单个分区表的分区,又可细分为主表与索引表 变更主表分区:变更一个主表的分区 变更...

确认血缘

任务配置上下游节点依赖前,您需先确认当前节点的血缘关系(例如,数据间的血缘关系、产出的分区数据),基于血缘关系配置节点的调度依赖。本文为您介绍如何确认血缘,以及未基于血缘配置节点依赖的影响。背景信息 确认血缘,...

MaxCompute数据

重要 要求done表至少有一个分区键,并且 分区键名称必须与数据表的分区键名称一致,若数据表的分区键为ds,那么done表的分区键也需要设置为ds;done表只有一个string类型的字段,字段名必须为“attribute”;done表添加的分区必须是数据表...

MaxCompute数据

重要 要求done表至少有一个分区键,并且 分区键名称必须与数据表的分区键名称一致,若数据表的分区键为ds,那么done表的分区键也需要设置为ds;done表只有一个string类型的字段,字段名必须为“attribute”;done表添加的分区必须是数据表...

如何实现一键转冷存

由于分区表的数据实际存储在各个子分区表中,所以本函数实际不改变数据存储位置,只是设置分区表的默认存储位置为OSS。polar_alter_subpartition_to_oss 该函数将分区表的部分子分区表转为OSS存储,并指定保留存储位置不变的子分区表数量。...

DDL语句

修改表的注释 是 修改表的修改时间 是 修改表的聚簇属性 支持增加聚簇属性 不支持删除聚簇属性 重命名表 是 删除表 是 查看表或视图信息 是 查看分区信息 是 列出项目空间下的表和试图 是 列出所有分区 是 修改表的所有人 否 清空非分区...

DDL语句

修改表的注释 是 修改表的修改时间 是 修改表的聚簇属性 支持增加聚簇属性 不支持删除聚簇属性 重命名表 是 删除表 是 查看表或视图信息 是 查看分区信息 是 列出项目空间下的表和视图 是 列出所有分区 是 修改表的所有人 否 清空非分区...

如何实现一键转冷存

由于分区表的数据实际存储在各个子分区表中,所以本函数实际不改变数据存储位置,只是设置分区表的默认存储位置为OSS。polar_alter_subpartition_to_oss 该函数将分区表的部分子分区表转为OSS存储,并指定保留存储位置不变的子分区表数量。...

MaxCompute+API 数据

重要 要求done表至少有一个分区键,并且 分区键名称必须与数据表的分区键名称一致,若数据表的分区键为ds,那么done表的分区键也需要设置为ds;done表只有一个string类型的字段,字段名必须为“attribute”;done表添加的分区必须是数据表...

分区和列操作

MaxCompute支持对已有表的分区和列执行变更操作,如添加分区、添加列、删除列、更改列数据类型等,您可以根据实际业务场景执行相应操作。MaxCompute SQL的分区和列操作命令如下。类型 操作 功能 角色 操作入口 分区操作 添加分区 为已存在...

API概览

分区 分区 CreatePartition 新增元数据表的分区数据湖的元数据表,新增一个分区。DeletePartition 删除元数据表分区 删除数据湖元数据表的指定分区。DeletePartitionColumnStatistics 删除元数据表分区统计信息 回收数据湖元数据表分区...

Db2 for LUW同步至云原生数据仓库 AnalyticDB ...

忽略报错并继续执行:跳过目标数据库中是否有同名表的检查项。警告 选择为 忽略报错并继续执行,可能导致数据不一致,给业务带来风险,例如:表结构一致的情况下,如在目标库遇到与源库主键的值相同的记录:全量期间,DTS会保留目标集群中...

同步时源为Db2 for LUW的注意事项及限制

Db2 for LUW同步至PolarDB-X 2.0 说明 DTS默认同步到目标数据库中时会取消外键约束,因此源数据库的级联、删除等操作不会同步到目标数据库。类型 说明 源库限制 带宽要求:源库所属的服务器需具备足够出口带宽,否则将影响数据同步速率。待...

分区表系统视图

PolarDB PostgreSQL版(兼容Oracle)提供了以下几个系统视图和系统函数,供您查看数据库分区表的相关信息。ALL_PART_TABLES 返回字段说明 列名 描述 owner 表的所有者。schema_name 表所在的schema。table_name 表名。partitioning_type ...

使用存储过程将数据导入Hologres内部(Beta)

partition_value:分区表的分区值,holo_table 为分区表时指定。支持将INT、TEXT、VARCHAR或DATE类型数据作为分区值。sql:标准的 select 语句,可用来查询MaxCompute或者Hologres的表,需确保 select 出来的分区字段的值必须完全等于 ...

分区热力图

采集逻辑tpcc和tpch内的所有逻辑表的分区热力信息:set ENABLE_SET_GLOBAL=true;set global PARTITIONS_HEATMAP_COLLECTION_ONLY='tpcc,tpch';采集所有逻辑内的指定逻辑表customer、order的分区热力信息:set ENABLE_SET_GLOBAL=true;...

数据质量入门

操作流程 步骤一:配置分区表达式 通过分区表达式匹配数据质量规则需校验的目标表的分区。步骤二:创建质量规则 根据业务需求,创建校验表数据的质量规则。步骤三:试跑质量规则 运行创建的规则,测试验证规则的正确性。步骤四:质量规则...

分区热力图

采集逻辑tpcc和tpch内的所有逻辑表的分区热力信息:set ENABLE_SET_GLOBAL=true;set global PARTITIONS_HEATMAP_COLLECTION_ONLY='tpcc,tpch';采集所有逻辑内的指定逻辑表customer、order的分区热力信息:set ENABLE_SET_GLOBAL=true;...

StarRocks物理和字段详情

分区信息:可查看数据表的分区信息。多级分区将按照各级分区组合结果展示,不同分区之间用/连接。例如:ds=20221001/pt1=a/pt2=b。注意:分区记录数和存储量信息仅供参考。说明 当数据表为 物理表(内部表)时,使用Less Than和fixed range...

配置MaxCompute输出组件

(可选参数)分区 如果选择了分区表,则需要选择数据表的分区。默认的分区为 ds=${bizdate}。输入字段 根据上游组件的输出,为您展示输入字段。输出字段 输出字段区域展示了已选中表的所有字段。如果不需要将某些字段输出至下游组件,则您...

REMOVE PARTITIONING

本文档介绍了删除分区表的分区结构,并转化成单表,且不丢失数据的方法。语法 ALTER TABLE.REMOVE PARTITIONING 命令用于删除分区和子分区表的分区结构,并转化成单表,且不丢失数据:ALTER TABLE table_name REMOVE PARTITIONING 示例 ...

配置MaxCompute输出组件

(可选参数)分区 如果选择了分区表,则需要选择数据表的分区。默认的分区为 ds=${bizdate}。输入字段 根据上游组件的输出,为您展示输入字段。输出字段 输出字段区域展示了已选中表的所有字段。如果不需要将某些字段输出至下游组件,则您...

RestAPI Reader最佳实践

数据集成RestAPI Reader插件提供了读取RESTful接口数据的能力,通过配置HTTP请求地址,可获取RestAPI类型的数据数据(例如获取时间范围内的数据、获取分页数据、循环请求参数获取数据等),并转换为数据集成支持的数据类型,传递给下游...

INTERVAL RANGE简介

INTERVAL RANGE分区表的分区只按递增顺序创建。如果分区键为DATE类型,INTERVAL的类型不能是TIME类型(HOUR、MINUTE、SECOND);如果分区键为TIME类型,INTERVAL的类型不能是DATE类型(YEAR、QUARTER、MONTH、WEEK、DAY);如果分区键不是...

设计规范

分区表的分区列级数不能超过6级,即底层存储数据的目录层数不能超过6层。因此应为分区表设置合适的生命周期。当部分数据的生命周期与其它数据不同时,您可以通过细粒度分区实现对部分数据的管理。分区字段定义依据 按优先级高低排序如下:...

物化视图和字段资产详情

分区信息:可查看数据表的分区信息。多级分区将按照各级分区组合结果展示,不同分区之间用/连接。例如:ds=20221001/pt1=a/pt2=b。说明 仅当物化视图有分区字段为您展示分区信息。分区记录数和存储量信息仅供参考。数据预览:若有当前表的...

数据表

前提条件 如果您需要写入分区,则需要先创建待写入的分区表,再使用该组件写入数据,关于如何创建分区,详情请参见 创建分区。使用限制 支持的计算引擎为MaxCompute。可视化配置组件参数 Designer 仅支持通过可视化方式,配置该组件...

附加/分离分区

语法说明 附加分区 ALTER TABLE[IF EXISTS]name ATTACH PARTITION partition_name { FOR VALUES partition_bound_spec|DEFAULT } 上述语法即表示附加一个现有表(该表本身可能已分区)作为目标表的分区。您可以使用 FOR VALUES 将表附加为...

附加/分离分区

分离(Detach)分区:将一个分区表的分区分离出来,成为一个普通表。它避免了将分区表中的数据直接删除,而是将其分离出来作为一个普通表移至别处。语法说明 说明 PolarDB PostgreSQL版 完全兼容PostgreSQL。关于附加/分离分区的详细语法...

生命周期

MaxCompute表的生命周期(Lifecycle),指表(分区数据从最后一次更新的时间算起,在经过指定的时间后没有变动,则此分区)将被MaxCompute自动回收。这个指定的时间就是生命周期。通过设置生命周期可以实现自动数据清理或数据保留,...

附加/分离分区

分离(Detach)分区:将一个分区表的分区分离出来,成为一个普通表。它避免了将分区表中的数据直接删除,而是将其分离出来作为一个普通表移至别处。语法说明 说明 PolarDB PostgreSQL版(兼容Oracle)完全兼容PostgreSQL。关于附加/分离...

存储空间分析

分区数 表的分区数。相关API API接口 说明 DescribeDBClusterSpaceSummary-查看集群的空间概览 查看 数仓版(3.0)集群的空间概览。DescribeDBClusterSpaceSummary-查看集群的空间概览 查看 湖仓版(3.0)集群的空间概览。...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 Redis 版 数据库备份 DBS 云数据库 RDS 云数据库 MongoDB 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用