HybridDB for MySQL设计和实践优化建议
当用户在使用HybridDB for MySQL进行数据库设计和实践的过程中，我们有如下建议：分区键的选择 分区键是数据库控制数据分布的维度，以该条件进行等值查询，查询范围只会限制在一个存储分区上，通常选择查询最频繁的列，或数据分布最均匀的...
分层存储
如果访问数据量大或访问频次过多，可能会导致费用高于标准存储费用，例如：一个月全量访问一次低频存储的表或分区产生的费用，将等于标准存储的费用。六个月全量访问一次长期存储的表或分区产生的费用，将等于标准存储的费用。长期存储 ...
Hive以EMR集群的方式处理OSS-HDFS服务中的数据
pt_spec 必选 新增的分区，格式为(partition_col1=partition_col_value1,partition_col2=partition_col_value2,.)。其中，partition_col 表示分区字段，partition_col_value 表示分区值。分区字段不区分大小写，分区值区分大小写。location...
创建混合分区
混合分区原理如下图所示：混合分区的基本原理是将分区表中的分区存储在不同的存储介质上，以达到冷热数据分离管理的目的。比如将热数据存储在本地PFS上，冷数据存储在OSS上，这样可以极大地降低冷数据的存储成本，且不影响热数据的查询性能...
增量同步性能白皮书
由于Tunnel的整体性能和表的分区数有很大的关联性，所以在本次的性能测试中，将主要考虑不同分区数（Channel数）对于Tunnel增量的同步速率的影响。说明 分区数会随着数据规模自动增长，如您需要预先创建分区，请联系表格存储技术支持。多台...
谷歌BigQuery数据迁移至AnalyticDB PostgreSQL版
STRUCT CREATE TYPE JSON JSON GEOGRAPHY CREATE TYPE/GEOGRAPHY DDL CREATE TABLE PARTITION BY（分区表）谷歌BigQuery的分区方式主要有以下三大类：整数范围分区 对应 AnalyticDB PostgreSQL版 的数字范围表分区，可以使用数字数据类型的...
DDL操作常见问题
生命周期操作 设置表的生命周期为3天，每个表的分区存储量很大，如何清理分区表旧数据？MaxCompute支持虚拟表吗？例如MySQL中的DUAL表？不支持虚拟表，您可以手动创建DUAL表。MaxCompute的表有无索引？没有索引，Hash Clustering可以提供...
表组合并（AUTO模式）
语法 将多个分区定义一致的表组合并到同一个目标表组时，如果源表组和目标表组对应的分区物理位置不一致，会涉及到分区迁移，需要将源表组所有的表、物理位置不一致的分区，全部迁移到目标表组对应分区的存储节点中。将多个表组合并到目标...
Hive使用JindoSDK处理OSS-HDFS服务中的数据
使用Hive搭建离线数仓时，随着数据量的不断增长，传统的基于HDFS存储的数仓可能无法以较低成本满足用户的需求。在这种情况下，您可以使用OSS-HDFS服务作为Hive数仓的底层存储，并通过JindoSDK获得更好的读写性能。前提条件 已创建ECS实例。...
JindoTable使用说明
JindoTable提供表或分区级别的热度统计、存储分层和表文件优化的功能。本文为您介绍JindoTable的使用方法。前提条件 本地安装了Java JDK 8。已创建EMR-3.30.0或后续版本的集群，详情请参见 创建集群。使用JindoTable 常见命令如下：...
JindoTable使用说明
JindoTable提供表或分区级别的热度统计、存储分层和表文件优化的功能。本文为您介绍JindoTable的使用方法。前提条件 本地安装了Java JDK 8。已创建EMR-3.30.0或后续版本的集群，详情请参见 创建集群。使用JindoTable 常见命令如下：...
JindoTable使用说明
JindoTable提供表或分区级别的热度统计、存储分层和表文件优化的功能。本文为您介绍JindoTable的使用方法。前提条件 本地安装了Java JDK 8。已创建EMR-3.30.0或后续版本的集群，详情请参见 创建集群。使用JindoTable 常见命令如下：...
JindoTable使用说明
JindoTable提供表或分区级别的热度统计、存储分层和表文件优化的功能。本文为您介绍JindoTable的使用方法。前提条件 本地安装了Java JDK 8。已创建EMR-3.30.0或后续版本的集群，详情请参见 创建集群。使用JindoTable 常见命令如下：...
JindoTable使用说明
JindoTable提供表或分区级别的热度统计、存储分层和表文件优化的功能。本文为您介绍JindoTable的使用方法。前提条件 本地安装了Java JDK 8。已创建EMR-3.30.0或后续版本的集群，详情请参见 创建集群。使用JindoTable 常见命令如下：...
JindoTable使用说明
JindoTable提供表或分区级别的热度统计、存储分层和表文件优化的功能。本文为您介绍JindoTable的使用方法。前提条件 本地安装了Java JDK 8。已创建EMR-3.30.0或后续版本的集群，详情请参见 创建集群。使用JindoTable 常见命令如下：...
JindoTable使用说明
JindoTable提供表或分区级别的热度统计、存储分层和表文件优化的功能。本文为您介绍JindoTable的使用方法。前提条件 本地安装了Java JDK 8。已创建EMR-3.30.0或后续版本的集群，详情请参见 创建集群。使用JindoTable 常见命令如下：...
JindoTable使用说明
JindoTable提供表或分区级别的热度统计、存储分层和表文件优化的功能。本文为您介绍JindoTable的使用方法。前提条件 本地安装了Java JDK 8。已创建EMR-3.30.0或后续版本的集群，详情请参见 创建集群。使用JindoTable 常见命令如下：...
JindoCube使用说明
如果Cache的数据是按照分区存储的，当确认某些分区数据不再需要时，删除这些分区数据可以节省大量存储空间。在Cache的详细页面，分区Cache的相关分区会通过列表展示，用户可以通过 Delete 删除特定分区的数据。说明 在删除Cache分区数据...
JindoCube使用说明
如果Cache的数据是按照分区存储的，当确认某些分区数据不再需要时，删除这些分区数据可以节省大量存储空间。在Cache的详细页面，分区Cache的相关分区会通过列表展示，用户可以通过 Delete 删除特定分区的数据。说明 在删除Cache分区数据...
JindoCube使用说明
如果Cache的数据是按照分区存储的，当确认某些分区数据不再需要时，删除这些分区数据可以节省大量存储空间。在Cache的详细页面，分区Cache的相关分区会通过列表展示，用户可以通过 Delete 删除特定分区的数据。说明 在删除Cache分区数据...
JindoCube使用说明
如果Cache的数据是按照分区存储的，当确认某些分区数据不再需要时，删除这些分区数据可以节省大量存储空间。在Cache的详细页面，分区Cache的相关分区会通过列表展示，用户可以通过 Delete 删除特定分区的数据。说明 在删除Cache分区数据...
JindoCube使用说明
如果Cache的数据是按照分区存储的，当确认某些分区数据不再需要时，删除这些分区数据可以节省大量存储空间。在Cache的详细页面，分区Cache的相关分区会通过列表展示，用户可以通过 Delete 删除特定分区的数据。说明 在删除Cache分区数据...
JindoCube使用说明
如果Cache的数据是按照分区存储的，当确认某些分区数据不再需要时，删除这些分区数据可以节省大量存储空间。在Cache的详细页面，分区Cache的相关分区会通过列表展示，用户可以通过 Delete 删除特定分区的数据。说明 在删除Cache分区数据...
JindoCube使用说明
如果Cache的数据是按照分区存储的，当确认某些分区数据不再需要时，删除这些分区数据可以节省大量存储空间。在Cache的详细页面，分区Cache的相关分区会通过列表展示，用户可以通过 Delete 删除特定分区的数据。说明 在删除Cache分区数据...
通过LOCALITY指定存储位置（AUTO模式）
创建逻辑表时指定存储位置 在创建逻辑表时指定存储位置以实现数据隔离，目前支持在单表和Range、Hash、List三种分区方式的分区表中使用Locality关键字。在实例中创建一个逻辑表，并指定其存储位置。详细语法参见 CREATE TABLE（AUTO模式）...
DROP PARTITION
本文档介绍了删除分区和子分区以及存储在分区和子分区内数据的方法。语法 ALTER TABLE…DROP PARTITION 命令用于删除分区和子分区及存储在分区和子分区内的数据。ALTER TABLE table_name DROP PARTITION partition_names;说明 该命令不可以...
原理
将表定义存储到表的Option结构上，包括这些数据需要存储：interval_expr：这个结构存储间隔分区的间隔大小 sub_part_strategy/sub_part_params：存储二级分区的分区键和分区类型信息 partition_template_list：存储了模版分区列表，用于...
表格存储建表注意事项
以为供应商提供服务为例，您有了一套基于表格存储的解决方案后，每加一个供应商就部署一组表格存储的表。这样，表的个数很快达到上限。如果您不断提高表个数的上限，会造成运维成本的不可控，也增加了后续全局数据分析的难度。建议在使用...
容量中心
当选择所有租户时，不再显示数据库和数据表筛选，改为展示集群下不同租户的存储、分区副本、CPU、内存的图表信息。右侧展示了不同租户磁盘使用量 Top10 的数据。展开后可以查看对应租户的数据和索引的磁盘占用量。单击 详情 或者租户名称，...
分区表索引
分区表索引类型 PolarDB PostgreSQL版（兼容Oracle）支持分区上的两种索引类型：本地索引 在分区表本地索引（Local Index）中，本地索引与分区表的分区一一对应，具有与其表相同的分区数和相同的分区范围。每个索引分区都与基础表的一个...
分区表索引
分区表索引类型 PolarDB PostgreSQL版 支持分区上的两种索引类型：本地索引 在分区表本地索引（Local Index）中，本地索引与分区表的分区一一对应，具有与其表相同的分区数和相同的分区范围。每个索引分区都与基础表的一个分区相关联，因此...
动态分区管理
同时，还支持将符合条件的分区数据迁移到低频存储设备，在保证查询性能的同时，有效降低存储费用。功能介绍 动态分区功能各版本支持情况如下：Hologres V1.3版本开始，支持配置动态分区规则，系统会根据已配置的规则定期运行调度任务，提前...
概述
当执行包含 WHERE 子句的 SELECT 语句时，查询计划会决定要存储记录的分区，并发送查询碎片给这个分区，然后从执行计划中剪去不能包含记录的分区。如果您不使用分区表功能，则建议禁用排除约束，从而提高性能。快速剪枝 和排除约束类似，...
读取以分区方式存储的OSS数据
MaxCompute支持创建OSS外部表为分区表，访问OSS上以分区方式存储的数据，通过该方式可降低读取数据量并提升数据处理效率。本文为您介绍MaxCompute支持的OSS标准分区路径格式和自定义分区路径格式。背景信息 创建OSS外部表后，MaxCompute会...
CREATE TABLE.PARTITION BY
如果INSERT命令存储的记录值超过了范围分区表的最大限制将会失败。除非分区规则中包括的边界规则指定了MAXVALUE值。如果您没有包括MAXVALUE分区规则，那么任何超过边界规则指定的最大限制的记录都会导致错误的产生。使用关键字TABLESPACE...
分区表命令列表
ALTER TABLE…TRUNCATE PARTITION 删除指定的分区中数据，保留完整的分区结构。ALTER TABLE…TRUNCATE SUBPARTITION 删除指定的子分区中所有数据，保留完整的子分区结构。DROP TABLE 删除表结构和存储在表上的数据。TRUNCATE TABLE 删除表...
数据输入输出
processed_df.to_odps_table("test_processed_odps_table")如果表为分区表，read_odps_table 方法会读取所有分区的数据，因此如果存在多个分区，您可以通过 partitions 参数读取部分的分区数据：df=md.read_odps_table("parted_odps_table...
在LIST或RANGE 分区表中处理偏离值
DEFAULT规则的语法如下：PARTITION partition_name VALUES(DEFAULT)其中partition_name指定的是用于存储那些不匹配其他分区规则的记录的分区或子分区的名称。最后的一个示例创建了列表分区表，在这个列表分区表中服务器会决定要存储基于列...
适配硬件链路和操作系统
int32_t aiot_at_hal_recv_handle(uint8_t*data,uint32_tsize)硬件链路适配的示例以STM32为例，详细信息，请参见Link SDK中的文件 portfiles/aiot_port/project/stm32l476-at/Core/hal_adapter.c。操作系统适配 AT模组驱动框架依赖抽象的...
数据建模
存储大小 取对应分区的物理存储量，与期望值进行比较，只要符合规则则通过。比较方式包括：>、、>=、、=和!主键唯一 对应分区，表主键字段值去重后的count数是否等于分区记录数，等于则规则通过，不等于则规则不通过。多表记录数波动率 源...
- 产品推荐
- 这些文档可能帮助您