初始化概述

Linux:分区数量无限制 Windows:128个 所有分区都是主分区,没有扩展分区与逻辑分区的概念。重要 MBR支持的最大分区容量为2 TiB,GPT最大支持的分区容量为18 EiB。如果您使用的云盘容量大于2 TiB或者后续有可能会扩容到2 TiB以上,分区时...

云盘扩容后使用growpart扩展GPT分区失败该如何处理

问题现象 云盘的分区格式为GPT,云盘进行云盘容量扩容后,使用growpart工具扩展分区(例如/dev/vdb1)或者文件系统时提示如下图所示的报错信息,导致云盘容量扩容了但是分区和文件系统的可用空间没有增加。本文以/dev/vdb1 分区为例进行...

更换操作系统相关问题

针对未扩容成功的系统,请参考 扩容分区和文件系统(Linux)手动扩展分区。该方式只是扩展系统盘分区,不会影响系统的版本。更换操作系统时,如果选不到目标镜像并且提示“该实例为非IO优化实例”怎么办?由于实例和镜像的约束限制,镜像的...

实时同步任务延迟解决方案

确认源端数据是否有倾斜或者是否需要扩展分区或shard的数量 对于源端是Kafka、DataHub和Loghub三种类型的实时同步任务,如果根据上述步骤未发现异常或Failover,则需要检查源端系统数据是否有倾斜或者分区、shard的读取流量是否达到了同步...

Dataphin管道任务是否支持数据数仓的动态分区

问题原因 静态分区动态分区的分区字段都是一个表外的虚拟字段,静态分区需要是手动指定分区字段及文件位置(load data);动态分区则是根据指定的字段值自动判断分区;目前Dataphin管道任务不支持动态分区。适用于 Dataphin 版本V3.6.2

变更表类型及分区策略(AUTO模式)

本文介绍了变更表类型(即在单表、广播表和分区表三者间进行相互转换)及分区策略(包括拆分函数或分区列)的相关语法和示例。本语法仅适用于AUTO模式数据库。前提条件 仅适用于分区模式为auto/partitioning的逻辑库(请参见 CREATE ...

CREATE TABLE(AUTO模式)

Hash分区与Key分区是 原生MySQL的标准分区语法 之一,PolarDB-X 为提供灵活强大的分区管理能力(例如分裂、合并迁移等)以及考虑支持向量分区键下热点散裂,PolarDB-X 不仅在语法上尽量兼容了MySQL的Hash分区与Key分区的建表语法...

稳定性说明使用限制

本文介绍MaxCompute投递(新版)的稳定性使用限制。稳定性说明 读 日志服务 稳定项 说明 可用性 可用性较高。如果 日志服务 出错,无法读取数据,MaxCompute投递任务会在内部至少重试10次。如果仍然失败,任务执行会报错,然后任务重启。...

使用pg_pathman插件

支持自动分区管理(通过函数接口创建分区,自动将主表数据迁移到分区表),或手工分区管理(通过函数实现,将已有的表绑定到分区表,或者从分区表剥离)。支持的分区字段类型包括int、float、date以及其他常用类型,包括自定义的domain。...

使用pg_pathman插件

支持自动分区管理(通过函数接口创建分区,自动将主表数据迁移到分区表),或手工分区管理(通过函数实现,将已有的表绑定到分区表,或者从分区表剥离)。支持的分区字段类型包括int、float、date以及其他常用类型,包括自定义的domain。...

2024年

修复分区表Alter TableAnalyze死锁的问题。修复分区表bitmap index scan触发Out Of Memory的问题。修复gpfdist外表在使用custom format时需要识别并处理字符串中的\0x00,否则读取数据会被截断的问题。2024年01月 V6.6.2.0 类别 功能 ...

错误码表(2.0版)

18056 CTAS_INSERT_TIMEOUT schema=xxx table=xxx timeoutDuration=xxx CTAS_INSERT_THREAD_ERROR message=xxx 18057 SUBPARTITION column conflicts with PARTITION column 二级分区一级分区列冲突,请修改。18058 No column ...

Linux实例SWAP分区的配置和常见问题处理

概述 本文介绍在Linux实例中,如何配置SWAP分区和常见问题处理。详细描述 SWAP分区介绍 在Linux系统中的SWAP(交换分区),类似于Windows系统的虚拟内存。系统会把一部分硬盘空间虚拟成内存使用,将系统内非活动内存换页到SWAP,以提高系统...

2023年

无 优化器 优化分区非常多的分区ODPS外表 JOIN时,Explain耗时长的问题。无 缺陷修复 修复某些场景下ALTER TABLE Add PartitionVacuum Full pg_index死锁导致实例不可用的缺陷。修复tdfunc插件中,NVL 函数处理NULL值异常导致...

动态分区管理

Hologres的动态分区功能无需预先设定所有分区信息,可依据创建分区表时配置的动态分区规则,自动创建并管理分区子表。同时,还支持将符合条件的分区数据迁移到低频存储设备,在保证查询性能的同时,有效降低存储费用。背景信息 动态分区...

表设计规范

分区设计存储逻辑 一张表里有很多个一级分区,每个一级分区都会按时间存储二级分区,每个二级分区都会存储所有的列,如下图所示。分区设计需要注意:设置分区的数量上限。避免每个分区中只存少量数据。以方便数据查询和计算为前提设置...

偏分析场景的实践和优化

同时我们也支持通过指定分区键建分区表,在分析场景中建议您根据如下依据选择分区键:尽可能选择参与JOIN的字段作为分区键,这样做的目的是为了关联条件下推,避免数据被拉取到计算层做计算。尽可能选择值分布均匀的字段作为分区键,这样...

PolarDB MySQL版8.0.2版本发布日志

修复分区表的所有分区分区剪枝阶段都被裁剪掉的情况下,使用RANGE INDEX访问分区表的全局二级索引时,触发ASSERT CRASH(断言错误)的问题。修复将冷数据归档为ORC格式时,因表中存在Blob类型的字段导致归档失败的问题。修复MRR等场景下...

扩展分区和文件系统

当您需要创建比镜像大的系统盘时,您可以阅读本文档,在虚拟机内进行扩容。如果您的镜像是20GB,需要创建的Linux系统盘是100GB,这样只会有20GB空间可作为业务容量。...进行扩容步骤,请参见 扩展分区和文件系统_Linux系统盘。

客户案例

而 OceanBase 提供的丰富的分区方式及 OLAP 能力有效地解决了不同场景下,业务指标的构建问题,这对于我们业务开发工作者来说可以更多的关注我需要什么样的指标,而不用考虑如何从存储系统中得到这些数据。大数据处理能力:随着阿里巴巴...

宽表模型介绍

基于物联网场景中多源异构数据存储、高并发吞吐、海量数据高性价比存储、多维度数据处理与分析等需求,表格存储推出了一站式物联网存储IoTstore解决方案,为物联网设备元数据、消息数据、时序轨迹等海量数据提供存储、查询、检索、分析、...

2021年

2021-11-29 华北2(北京)华东2(上海)华北3(张家口)华东1(杭州)华南1(深圳)网络开通流程 MaxCompute支持清空分区表中指定分区的数据 MaxCompute支持用户手动清空分区表中指定的一个或者多个分区的数据,但不会删除分区表或者分区表...

如何对JSON类型进行高效分析

IMCI)功能推出了完备的虚拟列列式JSON功能等,可以快速处理大数据和多种数据类型(包括结构化数据半结构化数据等),并提供高效的数据分析、查询流计算能力,适用于数据分析、数据仓库与扩展流计算等应用场景。针对海量半结构化数据...

列存索引中HashMatch算子的实现

Probe阶段 Build阶段读取左表并构建出散列表,而Probe阶段读取右表数据后查找散列表并根据匹配情况进行输出,既然Build阶段已经将数据进行分区构建,那Probe阶段也需要按Build阶段所采用的数据分区规则来进行分区处理。DoFetch Probe阶段...

Logview诊断实践

产生原因二:Project做过迁移,分区过滤未能处理好,导致读取了比较老的分区。解决措施:过滤掉不必要读取的老分区。执行阶段 Logview的 Detail 界面有执行计划(执行计划没有全部完毕),且作业状态还是Running。执行阶段卡住或执行时间比...

DataWorks OpenAPI概述

2级 UpdateWorkbenchEventResult 所属扩展程序的运维中心回调API,当运维中心的流程被扩展程序卡住后,调用UpdateWorkbenchEventResult返回扩展程序的处理结果。2级 ListShiftPersonnels 调用ListShiftPersonnels获取值班表的值班人员列表...

EMR Kafka磁盘故障运维

分区副本迁移:物理盘维修完毕上线之后,应将Topic分区数据迁移回原磁盘,leader负载迁移回原Broker节点。数据迁移时长:在磁盘运维过程当中,如果涉及到数据复制迁移,需要评估数据迁移时长对业务的影响。Broker迁移方式 方案描述 当发生...

数据倾斜调优

MapReduce 在了解数据倾斜之前首先需要了解什么是MapReduce,MapReduce是一种典型的分布式计算框架,它采用分治法的思想,将一些规模较大或者难以直接求解的问题分割成较小规模或容易处理的若干子问题,对这些子问题进行求解后将结果合并成...

表设计

这个表设计有很明显的热点问题,每次数据写入都是在表的末尾追加数据,而数据是按照分区键的范围进行分区的,也就是每次数据写入都会写入最后一个分区,而无法把写入负载平衡到多台机器上。这种情况下,单分区的写入能力就是整个表的写入...

同步 OceanBase 数据库的数据至 Kafka

背景信息 Kafka 是目前广泛应用的高性能分布式流计算平台,数据传输支持 OceanBase 数据库两种租户自建 Kafka 数据源之间的数据实时同步,扩展消息处理能力,广泛应用于实时数据仓库搭建、数据查询和报表分流等业务场景。前提条件 数据...

列存索引如何实现高效数据过滤

它能够减少为了处理查询而必须扫描的数据量,因为它只需要处理与查询范围相关的数据块。另外,minmax索引有助于减少存储索引所需的空间,因为它只需要存储每个块的最小值和最大值,而不是所有数据的索引。Bloom filter Bloom filter是一种...

时序引擎版本说明

修复分区的TTL参数值被删除时元数据持久化的问题。实例默认开启tsproxy健康检查。实例默认开启慢查询管理。优化读写性能,稳定性修复。3.4.31 发布日期 类型 说明 2023年08月09日 功能优化 修复调用API进行鉴权时,不支持数据库粒度鉴权的...

2021年

分区表使用跨机并行查询 GLOBAL INDEX支持对分区表进行DDL操作 支持在对分区表进行DDL操作时(如DROP、SPLIT、MERGE等),操作该分区表下的所有GLOBAL INDEX。支持对分区表进行DDL操作 优化 ORA_HASH函数兼容性 ORA_HASH函数替换为DBMS_...

创建OSS外部表

MaxCompute支持您在项目中创建OSS(Object Storage Service)外部表,存储服务OSS上的目录建立映射关系,您可以通过OSS外部表访问OSS目录下的数据文件中的非结构化数据,或将MaxCompute项目中的数据写入OSS目录。本文为您介绍创建OSS外部...

CREATE TABLE

设置默认值、自增列 设置主键 设置分布键 设置分区生命周期 设置聚集索引 设置全文索引 设置向量索引 设置冷热分层存储策略 表的数据分布策略 语法 CREATE TABLE[IF NOT EXISTS]table_name({column_name column_type[column_attributes...

局部事务

为数据表开启局部事务后,使用局部事务功能,您可以创建数据范围在一个分区键值内的局部事务并对局部事务中的数据进行读写操作。通过使用局部事务您可以实现单行或多行读写的原子操作。场景 使用局部事务功能,可以实现单行或多行读写的...

表操作篇

表格存储会对表中的行按主键进行排序,合理设计主键可以让数据在分区上的分布更加均匀,从而能够充分地利用表格存储水平扩展的特点。选取分区键时,建议遵循以下几个原则:单个分区键值中的数据不宜过大,建议不超过 10 GB。说明 单个分区...

2020年

CREATE TABLE.PARTITION BY HASH 分区表 新增指定分区或者子分区名称查询指定分区的数据。查询指定分区 HOST参数 支持HOST参数,用于获取客户端的HOST值。无 优化 视图 优化polar_stat_activity视图,增加query_id字段。无 兼容性 内核小...

常见问题

本文列举了阿里云 表格存储 的常见问题,帮助您快速了解 表格存储。一般性常见问题 什么是 表格存储?表格存储 面向海量结构化数据提供Serverless表存储服务,同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM...

块存储FAQ

本文汇总了使用块存储时的常见问题。存储容量单位包SCU问题 什么是存储容量单位包SCU?哪些块存储产品可以使用存储容量单位包SCU?存储容量单位包SCU可以单独使用吗?存储容量单位包SCU的抵扣规则是什么?SCU如何计费?SCU可以退款吗?ESSD...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
媒体处理 云数据库 Redis 版 负载均衡 对象存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用