表设计规范

单个分区中数据量较大的情况下,MaxCompute执行任务时会进行片处理而不影响分区裁剪的优势。单个分区中文件数较多影响MaxCompute Instance数量,造成资源浪费和SQL性能的下降。采用多级分区时,建议先按日期分区,然后按交易类型...

公告

中国香港、海外地域 2024年04月15日~2024年04月18日 华东1(金融云)、华东2(金融云)2024年04月22日~2024年04月25日 在服务升级期间可能影响当前正在运行的PyODPS作业,若您遇到独享资源组PyODPS作业失败问题,或其他任何相关问题需要...

DataWorks OpenAPI概述

当超过QPS或每日调用次数限制后,将会出现调用失败,请合理控制调用并发和次数。API调用成功和调用失败的次数都会计入每日调用限制次数中。免费额度与计费方式 OpenAPI采用版本结合按量计费的商业化方式,计费标准如下。版本 免费调用额度 ...

常见问题

另外,当数据量很大,单机分区数也会很多,服务端的并发请求可能会出现排队现象。如果设置固定查询字段进行HASH分区,则查询只需要扫描某一个或某几个分区。因此,当分区数量较多,设置固定字段会带来明显的RT和QPS提升。说明 为提升...

2023年

修复实例分时扩容表RENAME后会出现数据未重新分布的问题。修复创建带有GROUP BY和UNIONALL的实时物化视图场景下,执行INSERT时出现Coredump的问题。修复DROP TABLE报错 cache lookup failed for extension 18713194 的问题。修复向量...

分区设计

表的数据将拆解成多个数据分区独立存储,通常的设计原则是:主键(Primary Key)单实例数据库不要求表一定要有主键,但是对于分布式数据库,主键则是必须的,以保证一行数据是全局唯一的,避免迁移过程出现问题。如果用户没有特殊的性能...

数据建模诊断

但是因为数据特征存在未知性或者随着业务特征变化发生变化,所以可能存在分布字段选择不合理的情况,最终导致数据倾斜问题,造成各个节点处理数据资源使用不均衡,子任务出现长尾,最终影响查询性能。分布字段合理性诊断帮助用户...

转换MBR分区为GPT分区

重要 转换Windows云盘分区过程中,云盘数据不可用,如果您正在运行的业务依赖于该盘的数据,可能会出现问题。建议您先停止服务,待分区转换完成并恢复云盘数据后再继续运行业务。步骤一:转换分区(可选)备份云盘数据。警告 Windows转换...

自助问题排查

自助问题排查可以帮助您排查 弹性公网 IP EIP(Elastic IP Address)实例访问不通、访问异常、配额、费用等问题,实例排查期间可能对您的实例探测并进行诊断分析,但不会对您的实例配置和正常业务造成影响。操作步骤 登录 弹性公网IP管理...

版本发布说明

修复AUTO模式数据库中分区表的分区列包含反引号字符,创建表报错的问题。修复在扩缩容或者UGSI创建过程中,insert ignore(returning)可能导致数据校验不通过的问题。修复GSI和Local Index索引名重复的问题。修复创建UGSI,如果索引名...

多元索引最佳实践

主键设计对多元索引的同步速度有一定的影响,对数据表主键的要求是写入数据要尽可能分散到数据表的不同分区,因此如果写入TPS较高,需要尽可能分散在数据表的多个分区中,避免出现写单分区、写尾部分区问题。目前仅支持从数据表中...

上下游存储

问题原因 Kafka某个分区没有数据,影响Watermark的产生,从而导致Kafka源表数据基于Event Time的窗口后,不能输出数据。解决方案 确保所有分区都存在数据。开启源数据空闲监测功能。在 其他配置 中添加如下代码后保存生效,具体操作请...

历史版本常见问题

部分时间类型的拆分函数路由后有概率出现分片缺失的现象 现象描述 当分库分表列的类型是date/datetime/timestamp,且使用YYYYMM/YYYYWEEK/YYYYDAY/MMDD/MM/DD等拆分函数进行水平分区时,对于诸如 col>time1 and col的区间范围查询,有概率...

扩容分区和文件系统(Linux)

在ECS控制台上扩容云盘容量后,对应分区和文件系统并未扩容,您还需要进入ECS实例内部继续扩容云盘的分区和文件系统,将扩容部分的容量划分至已有分区及文件系统内,使云盘扩容生效。本文为您介绍如何通过两个步骤完成Linux实例云盘的分区...

计费

本文为您介绍使用 无影云电脑(专业版)计费项目、计费说明和计费规则。注意事项 以下功能处于公测中,公测期间您可以免费使用。公测结束后收取费用,相关计费说明提前发布公告,届时请以公告为准。功能 相关文档 快照 使用快照...

CREATE TABLE

设置默认值、自增列 设置主键 设置分布键 设置分区键与生命周期 设置聚集索引 设置全文索引 设置向量索引 设置冷热分层存储策略 表的数据分布策略 建表前,您可以通过下图中的示例,了解关于表的几个重要概念,包括片、分区、聚集索引。...

CREATE TABLE(AUTO模式)

Hash分区与Key分区是 原生MySQL的标准分区语法 之一,PolarDB-X 为提供灵活强大的分区管理能力(例如分裂、合并与迁移等)以及考虑支持向量分区键下热点散裂,PolarDB-X 不仅在语法上尽量兼容了MySQL的Hash分区与Key分区的建表语法...

表设计

假设数据分布不均匀,会出现以下问题:数据写入和读取能力受限于单个分区的能力,或者是单机能力,存在明显瓶颈。在某些数据处理场景下,热点或者数据分布不均会导致明显的长尾效应,拖慢整体速度。某个数据系统或者模块往往仅仅是整个业务...

2022年

透出一级Quota,支持全视角配置包年包月二级Quota,支持整点、半点粒度的Qutoa调度时间计划(原来只支持每天最多3个时段分时),集成新规格配置:弹性预留CU。新版控制台访问控制:基础权限控制接入RAM控制。2022-11-15 全部地域 项目管理...

计费FAQ

快照计费问题 我已经购买了OSS预付费存储包,同时使用快照和OSS服务,存储包优先抵扣哪个产品?快照容量超出OSS预付费存储包的存储空间后,快照如何计费?购买OSS预付费存储包后,ECS快照是否还收费?如果账号欠费,有关联关系(创建过...

购买、变配与升级

说明 当常见问题场景中未明确产品系列,表明该问题仅适用于 AnalyticDB MySQL 数仓版(3.0)。常见问题概览 AnalyticDB for MySQL数仓版(3.0)和湖仓版(3.0)的区别是什么?AnalyticDB for MySQL集群的弹性模式和预留模式的区别是什么...

块存储FAQ

本文汇总了使用块存储的常见问题。存储容量单位包SCU问题 什么是存储容量单位包SCU?哪些块存储产品可以使用存储容量单位包SCU?存储容量单位包SCU可以单独使用吗?存储容量单位包SCU的抵扣规则是什么?SCU如何计费?SCU可以退款吗?ESSD...

表结构设计

选择分布键 如果业务明确有增量数据导入需求,创建普通表可以同时指定分布键和分区键,来实现数据的增量同步。您可以在创建表,通过 DISTRIBUTED BY HASH(column_name,.)指定分布键,按照 column_name 字段的Hash值进行分区。更多详情...

路由到对象存储OSS

分区较多导致数据分散、写入次数增多、碎片文件多等问题,因此分区的配置策略非常关键,因为以下为参考建议:Kafka Source:可同时按时间和 partition 分区,当性能无法满足,可通过提升 kafka partition 数量间接提升 Connector 吞吐...

创建OSS Sink Connector(新版)

分区较多导致数据分散、写入次数增多、碎片文件多等问题,因此分区的配置策略非常关键,因为以下为参考建议:Kafka Source:可同时按时间和 partition 分区,当性能无法满足,可通过提升 kafka partition 数量间接提升 Connector 吞吐...

基础服务计费

阿里云CDN的基础服务支持 按流量计费、按带宽峰值计费 和 月结95带宽峰值计费,您可以根据实际业务场景选择合适的计费方式。通过本文您可以详细了解CDN基础服务的计费方式和注意事项。说明 无特别说明的情况下,CDN的按流量计费、按带宽...

基础服务计费

阿里云全站加速的基础服务支持 按流量计费、按宽带峰值计费 和 月结95带宽峰值计费,您可以根据实际业务场景选择合适的计费方式。通过本文您可以详细了解全站加速基础服务的计费方式和注意事项。按流量计费(默认)适用场景 计费规则 适用...

常见问题

本文列举了阿里云 表格存储 的常见问题,帮助您快速了解 表格存储。一般性常见问题 什么是 表格存储?表格存储 面向海量结构化数据提供Serverless表存储服务,同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM...

块存储概述

各云盘类型对比说明如下所示:云盘类型 特点 应用场景 计费 ESSD AutoPL云盘 容量与性能可解耦 支持预配置云盘性能 支持性能突发 ESSD云盘所适用的场景 云盘容量固定,云盘性能要求高 业务波动较大,波峰高频出现,需应对突发业务 云盘容量...

弹性QPS计费说明

如果您的业务QPS通常比较平稳,仅在大促、新业务上线等特定场景才会出现QPS突增,您购买高防实例时业务QPS规格可以选择为正常场景下的QPS,然后开启弹性QPS,避免QPS超限导致的业务丢包或限流问题。本文介绍了DDoS高防实例弹性QPS的计费...

计费规则

包年包月计费是一种需要先付费才能使用资源的计费方式,主要适用于稳定的业务运行场景。您需要根据实际业务量分析资源的使用需求,一次性支付一个月、多个月或多年的费用。支付成功后,资源被系统分配,直到资源有效期到期后未继续续费而被...

价格总览

计费模式 mPaaS 产品按照使用量进行计费,并提供了三种计费模式:预付费模式:是指先付费,再使用服务的计费模式。资源包模式:是指先付费购买资源包,再使用服务的计费模式。在这种模式下,您可以得到更优惠的价格。后付费模式:是指先...

分区表常见问题

在 PolarDB MySQL版 8.0.1和8.0.2版本中,不存在该问题分区的内存都是共享的。建议您升级您的内核版本。为什么添加分区的(ADD PARTITION)操作耗时长,如何避免?操作耗时长是因为在该分区表上有大事务正在进行。PolarDB MySQL版 8.0.2...

流量计费保护

分时费用明细:查看分时总费用、流量计费保护功能节省的费用(包括流量处理费和功能费)。云监控告警 一小时内的峰值QPS大于流量计费保护阈值时,云监控自动给告警联系人发送告警邮件、短信。您可以在收到告警信息时,及时查看并处理告警...

确认表血缘

导致下游取数出现问题 若当前节点 Job_B 代码中配置了依赖A表的数据,但未将产出A表数据的节点 Job_A 作为当前节点依赖的上游,则可能会出现A表数据未产出,当前节点便开始执行,最终导致 Job_B 节点产出的表数据出现问题。虽然 Job_A 的...

分区

一旦分区存在,那样做就导致错误,因为当分区存在是不支持仅在分区表上增加或删除约束的。不过,分区表本身上的约束可以被增加(如果它们不出现在父表中)和删除。由于分区表并不直接拥有任何数据,尝试在分区表上使用 TRUNCATE ONLY ...

EMR Kafka磁盘故障运维

业务场景 Kafka将日志数据存储到磁盘中,当磁盘出现故障导致磁盘IO能力下降、集群吞吐下降、消息读写延时或日志目录offline等问题。这些情况有可能影响到线上业务平稳运行、数据丢失、Kafka集群容错能力下降,单块盘故障甚至有可能...

LIST DEFAULT HASH

创建LIST DEFAULT HASH分区表 语法 PolarDB 支持新的分区类型,前面是普通的LIST分区,不在LIST分区中的数据放在DEFAULT分区,如果DEFAULT分区太大可以根据HASH规则分成多个DEFAULT分区:CREATE TABLE[schema.]table_name table_definition...

分区分

为了帮助您深入理解 云数据库 SelectDB 版 的分区分桶的概念和如何实施分区分桶,本文档详细阐释了分区分桶的原理和操作示例,以帮助您理解分区分桶原理和如何实施分区分桶。概述 为了能高效处理大数据量的存储和计算,云数据库 SelectDB ...

Linux实例中数据恢复

数据恢复方法 在Linux实例里,您重启系统后,可能会出现数据盘分区丢失或者数据丢失的问题。这可能是因为您未在/etc/fstab 文件里设置自动挂载。此时,您可以先手动挂载数据盘分区。如果手动挂载时报分区表丢失,您可以尝试如下三种办法...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 Redis 版 共享流量包 云服务器 ECS Web应用防火墙 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用