使用快照创建云盘
重要 如果快照容量小于2,048 GiB，但您希望设置的新云盘容量大于2,048 GiB，请提前确认快照对应的历史云盘采用的是GPT分区格式（通过 fdisk-lu 命令查看 Disk label type 值是否为 gpt）。否则，建议您设置为小于2,048 GiB，避免配置分区...
分区分桶
不论分区列是什么类型，在写分区值时，都需要加双引号。分区数量理论上没有上限。当不使用分区（Partition）建表时，系统会自动生成一个和表名同名的，全值范围的分区（Partition）。该分区（Partition）对用户不可见，并且不可删改。创建...
分区格式化数据盘
不同操作系统的数据盘分区格式化的操作不同，请您根据服务器实际的操作系统进行选择：分区格式化Linux服务器的数据盘的具体操作，请参见 分区格式化Linux服务器的数据盘。分区格式化Windows服务器的数据盘的具体操作，请参见 分区格式化...
合并小文件
分区格式也可能是其他格式 for partition in t.iterate_partitions(spec="ds=s"%$datetime):instance=odps.run_merge_files(table_name,str(partition),hints=hints)#从这个logview的Waiting Queue点进去，才可以找到真正执行的logview ...
CREATE TABLE
使用范围或哈希分区时，分区键可以包含多个列或表达式（最多 32 个，但在构建 PolarDB时可以更改此限制），但对于列表分区，分区键必须由单个列或表达式组成。范围和列表分区需要 btree 运算符类，而哈希分区需要哈希运算符类。如果没有...
离线扩容分区和文件系统（Linux数据盘）
说明 如果一个已有分区采用了MBR分区格式，则不支持扩容到2 TiB及以上。为避免造成数据丢失，建议您创建一块大于2TiB的云盘，格式化一个GPT分区，再将MBR分区中的数据拷贝到GPT分区中。具体操作，请参见 初始化大于2 TiB数据盘。当出现因扩...
特征尺度变换
无 inputTablePartitions 否 输入表中指定参与训练的分区，格式为 Partition_name=value。如果是多级分区，格式为 name1=value1/name2=value2;如果指定多个分区，则需要使用,隔开。输入表的所有分区。outputTable 是 缩放尺度后的结果表。...
2019年
ACID语义、Upload、命令格式 2019-05-13 更新Spark开发指南。新示例 新增Java、Scala和PySpark开发示例。搭建Linux开发环境、概述、PySpark开发示例 2019-05-10 新增欠费预警接收设置步骤说明。新说明 主账号可以设置子账号接收欠费预警...
特征离散
无 inputTablePartitions 否 输入表中指定参与训练的分区，格式为 Partition_name=value。如果是多级分区，格式为 name1=value1/name2=value2;如果指定多个分区，则需要使用,隔开。输入表的所有分区。outputTable 是 离散后的结果表。无 ...
奇异值分解
inputTablePartitions 否 输入表中指定参与分析的分区，格式为 Partition_name=value。如果是多级分区，格式为 name1=value1/name2=value2，。如果指定多个分区，则需要使用,隔开。默认选择所有分区。outputUTableName 是 U矩阵的输出表，...
Table2KV
无 inputTablePartitions 否 输入表中指定参与训练的分区，格式为 Partition_name=value。如果是多级分区，格式为 name1=value1/name2=value2;如果指定多个分区，则需要使用半角逗号（,）分隔。默认选择所有分区。selectedColNames 否 选择...
冷数据归档常见问题
冷数据文件的格式是什么？目前支持CSV、IBD 和ORC格式。如何判断当前表或分区是否归档成功？归档完成后，您可以通过以下两种方式来查看表或分区是否归档成功：执行 SHOW CREATE TABLE table_name;命令查看表结构信息，以此来确认表或者分区...
使用fdisk扩容新分区起始位置无法与扩容前保持一致
问题原因 用户在最初进行分区格式化时，可能使用了其他工具，例如，使用了parted命令指定了小于2048的分区起始位置。用户在最初进行分区格式化时，在进行“切换dos兼容性标志”的操作时，可以指定小于2048的值作为分区起始位置。解决方案 ...
分区投影
本文档主要介绍了分区投影功能的背景信息、使用场景和限制，以及如何使用分区投影功能。背景信息 当您把数据存储在OSS或HDFS上，并建立大量的分区管理这些数据。DLA Presto在分析这些数据时，会花费大量的时间从元数据系统中获取分区，从而...
Quick Audience创建用户标签时报错："该分区无数据，...
问题描述 Quick Audience创建...问题原因 当天分区没有数据导致的，需要检查一下分区表哪天存在数据，如果是昨天存在数据，则配置分区格式为：${yyyyMMdd-1}。解决方案 配置分区格式为${yyyyMMdd-1}就可以了。适用于 Quick Audience 公共云
Quick Audience数据导入中调度任务...提示表分区无数据
问题描述 Quick Audience数据导入中调度任务执行失败，报错提示表分区无数据是什么原因？问题原因 调度任务查询的分区日期是当天，而Dataphin中的业务数据日期是前一天。解决方案 数据导入的任务调度的分区日期与业务数据分区日期保持一致...
出错提示“Btrfs has been removed”
问题原因 待迁移的操作系统使用了Btrfs文件系统，而迁移后Anolis/Alibaba Linux不再支持Btrfs文件系统，这会导致使用了Btrfs文件系统的硬盘分区中的文件在迁移后将无法读取，从而导致操作系统迁移失败。解决方案 远程连接ECS实例。具体操作...
DDL操作常见问题
分区操作 分区和分区列的区别是什么？一张表的分区的数量是否越多越好？如果源表没有分区字段，是否可以增加或更改分区？如何查看指定的分区是否存在？如何查看分区数量？列操作 是否可以添加或删除列？如何添加列？如何设置自增长列？...
done分区指南
从哪个时间点开始回追增量数据)[可选],可以将done分区格式定为：ds=20150105.base_timestamp#1505147960.done base_timestamp#1505147960 为回追增量的起始时间戳格式，单位秒 ds=20190606/hh=14.base_timestamp#1559802331.done 为小时...
块存储FAQ
写入数据与分区格式化有什么关系？回滚云盘问题 数据盘进行二次分区后，此时回滚快照后，数据盘是几个分区？回滚云盘时为什么报错“执行回滚磁盘需要停止实例，并且确保当前磁盘没有创建中的快照和没有更换过操作系统。其他问题 如何转移...
云盘扩容后使用growpart扩展GPT分区失败该如何处理？
问题现象 云盘的分区格式为GPT，云盘进行云盘容量扩容后，使用growpart工具扩展分区（例如/dev/vdb1）或者文件系统时提示如下图所示的报错信息，导致云盘容量扩容了但是分区和文件系统的可用空间没有增加。本文以/dev/vdb1 分区为例进行...
约束和限制
目录下面采样最新和最老的文件，每个文件读取前1000行 元数据发现SLS数据源发现历史投递数据 如果投递中途修改了分区格式，不会发现修改前的数据 一键建仓/多库合并支持的数据源网络类型 VPC 一键建仓/多库合并支持的数据源 PolarDB MySQL ...
使用OSS Foreign Table分区表
在 OSS投递功能 面板中配置投递信息时，分区格式 建议设置为 date=Y%m/userlogin，生成的OSS目录格式示例如下：oss:/testBucketName/adbpgossfdw├─date=202002│├─userlogin_158561762910654*_647504382.csv│└─userlogin_...
初始化小于等于2 TiB数据盘（Windows）
一块全新的Windows数据盘挂载到ECS实例后，还不能直接存储数据，通常您需要完成磁盘联机、新建分区、格式化等初始化操作后，才能供系统读写数据。本文介绍如何在Windows系统中初始化一块小于等于2 TiB的数据盘。前提条件 数据盘已挂载到ECS...
通过联邦分析同步数据
支持设置的分区格式如下：value：按值进行分区。yyyyMMdd：按年、月、日进行分区。yyyyMM：按年、月进行分区。yyyy：按年进行分区。单击 确定。任务自动启动。在 联邦分析 页面，您可以查看已创建的任务，也可以 在 操作 列 查看、编辑、...
通过联邦分析功能同步至湖仓版
支持设置的分区格式如下：value：按值进行分区。yyyyMMdd：按年、月、日进行分区。yyyyMM：按年、月进行分区。yyyy：按年进行分区。单击 确定。任务自动启动。在 联邦分析 页面，您可以查看已创建的任务，也可以 在 操作 列 查看、编辑、...
何时使用Range-Range分区
Range-Range分区是指一级分区是Range分区，二级分区也是Range分区的组合分区类型。Range-Range分区适用于在多个时间维度上存储与时间相关的数据应用程序，这些应用程序通常不使用某个特定的时间维度来访问数据，而是使用另一个时间维度，...
Dataphin计算任务报错“Partition not found”
问题描述 用户创建计算任务，在执行过程中报错“Tracking SQL Task[1/1]Process:Task ...解决方案 如果是多层分区的表，查询数据可以只指定一层分区信息就可以，但是操作表数据（增删改）需要将多个分区字段全部指定完整。适用于 Dataphin
日志投递MaxCompute后，如何检查数据完整性
那么无论该日志是什么时刻写入服务端，这条日志会存入MaxCompute的 2017_05_19_10_00 分区，计算细节参考 投递日志到MaxCompute（旧版）。如果不考虑写入了历史数据等问题，在日志实时写入的情况下，有以下两种方法判断分区数据是否已完整...
Dataphin资产元数据的分区记录数不准确
问题描述 Dataphin资产元数据的分区记录数不准确，显示为0，但是在即席查询中显示分区是数据的。问题原因 资产这里分区记录数是T+1更新的。由于ds='20220420'分区是2022041才产出的，因此是没有采集到的。解决方案 待T+1后就会更新ds='...
子分区模板
您只需在子分区模板中定义一次子分区描述符，然后将该子分区模板应用于表中的每个分区，从而快速批量地为表中的分区定义子分区描述符。注意事项 如果分区未指定子分区描述符，系统将默认使用子分区模板来定义子分区。如果分区已指定子分区...
基本数据库对象及概念
本文汇总了 AnalyticDB MySQL版 集群中关于基本数据库对象及概念相关的常见问题和答案。是否支持将表从一个表组移...如果在实际使用中二级分区数过多，建议增大二级分区键的分区粒度，比如将按日分区改为按月分区、将按月分区改为按年分区等。
分区表简介
本文详细介绍了 PolarDB PostgreSQL版 分区表功能的优势和特性。概述 在 PolarDB PostgreSQL版...语法 关于各分区类型的分区表的相关命令及说明，例如创建分区表、添加分区至分区表、合并分区、拆分分区、删除分区等，请参见 分区表命令列表。
分区表简介
本文详细介绍了 PolarDB PostgreSQL版（兼容Oracle）分区表功能的优势和特性。...语法 关于各分区类型的分区表的相关命令及说明，例如创建分区表、添加分区至分区表、合并分区、拆分分区、删除分区等，请参见 分区表命令列表。
重命名分区
注意事项 本文要求 PolarDB-X 实例版本必须为5.4.14-16539836及以上...场景 4：目标分区是非模板化的二级分区 和场景3不一样，当二级分区是非模板化分区时，重命名二级分区就是重命名具体的分区，语法同 场景3：目标分区是模板化的二级分区，
何时使用Range-List分区
Range-List分区是指一级分区是Range分区，二级分区是List分区的组合分区类型。Range-List分区通常用于存储历史数据的大表，并且在多个维度上访问。数据的历史视图通常是一个访问路径，但是某些业务用例向访问路径添加了另一种分类。例如，...
ODPS-0123031
错误码：ODPS-0123031:ODPS partition exception 错误1：maximum 60000 partitions allowed 错误信息示例 ODPS-0123031:ODPS partition exception-maximum 60000 partitions allowed 错误描述 每张MaxCompute的分区表最多允许存在 60000 个...
原理
本文概述了分区表模块的主要实现原理，便于用户了解分区表在底层实现时的一些细节，从而能够更好地学习如何去使用分区表。分区表创建原理 分区表的创建主要涉及语法解析模块和执行模块。语法解析模块 分区表创建是分区表整个功能的核心部分...
增加分区
场景2：目标分区是含有二级分区的一级分区 示例1：增加一个一级分区，但同时指定二级分区定义 说明 该种用法仅适用于非模板化的二级分区。假设r_h_t1与r_h_t2都采用Range+Key的非模板化二级分区，建表SQL如下所示：CREATE TABLE `r_k_ntp_t...
Dataphin中汇总逻辑表补数据生成SQL中事实逻辑表筛选...
概述 Dataphin中汇总逻辑表补数据时，生成的SQL中事实逻辑表筛选日期是最大分区（20230516），而不是补数据输入的业务日期（20230505）。详细信息 汇总逻辑表补数据生成的SQL中，具体分区是由事实逻辑表的“分区与生命周期”中设置的。该...
- 产品推荐
- 这些文档可能帮助您