使用新版DMS控制台进行变更时提示“Duplicate entry:...

使用结构设计功能进行DDL操作时会出现问题。例如添加唯一约束或唯一索引、调整唯一约束或唯一索引(包含调整唯一约束或唯一索引内的组成字段)的DDL操作。对数据表调整或新增的唯一约束或唯一索引已存在重复数据。确认唯一约束或唯一索引...

支持对分区表进行DDL操作

由于当前版本不支持,如果使用此语法在执行DDL时,会出现报错。INVALIDATE GLOBAL INDEXES:在分区表上进行DDL操作时,如果加上 INVALIDATE GLOBAL INDEXES 关键字,则会在执行DDL时,使该分区表上所有的GLOBAL INDEX失效。默认行为:默认...

主键与唯一键(DRDS模式)

id|serial_id|order_time|+-+-+-+|100006|20001|2023-03-01|100001|20001|2022-01-01|+-+-+-+示例11:在含有重复唯一键的表上执行DDL,可能会出现唯一键冲突报错 与Local主键类似,用到Local唯一键的表内可能存在重复的唯一键值,当在该表...

数据集成侧同步任务配置

例如,CPU、内存、网络等互相影响,可能会导致离线任务变慢或实时任务延迟等问题,甚至在资源不足的极端情况下,可能会出现任务被OOM KILLER杀掉等问题。后续步骤 完成任务配置后,您可以对已创建的任务进行管理、执行加减表操作,或对任务...

2021年

2021年5月 修复栅格数据导入时可能会出现崩溃的问题。2021年5月 V1.1.11 内核小版本 类别 名称 描述 相关文档 发布时间 新增 idle_session_timeout参数 新增idle_session_timeout参数,用于控制空闲会话的保留时间,超出保留时间的会话将会...

从通过专线、VPN网关或智能接入网关接入的自建Redis...

源库单机版Redis同步到目标库集群版Redis的操作限制:由于集群cluster只允许单个命令操作单个slot,若在源库执行多Key操作时,Key不在同一个slot或涉及多个slot,则会出现以下报错:CROSSSLOT Keys in request don't hash to the same slot...

V5.4.x系列实例版本说明

修复在只读实例上使用包含 auto_increment_increment 变量的命令会出现的NPE问题。修复GSI DDL任务恢复后可能会导致不同随机后缀物理表遗留的问题。修复DDL命令执行过程中偶发性的死锁问题。修复当使用CHECK TABLE检查单表时,系统只检查...

EMR Kafka磁盘故障运维

业务场景 Kafka将日志数据存储到磁盘中,当磁盘出现故障时,导致磁盘IO能力下降、集群吞吐下降、消息读写延时或日志目录offline等问题。这些情况有可能影响到线上业务平稳运行、数据丢失、Kafka集群容错能力下降,单块盘故障甚至有可能...

抢占式DDL

对于含有多个只读节点的 PolarDB MySQL版 集群,经常会出现MDL锁同步失败导致DDL执行失败的问题,为此新增抢占式DDL功能。使用方法 您可以先通过 loose_polar_support_mdl_sync_preemption 参数开启抢占式DDL功能,并通过 loose_polar_mdl_...

如何排查Java场景下故障注入不生效的问题

在对Java进程注入故障时,可能会出现故障注入失败的情况。为解决此类问题,在创建或编辑演练时,您可以在故障执行阶段选择开启Debug模式,并通过相关的日志信息来了解故障注入失败的原因。开启Debug模式 在查看目标演练的故障注入日志前,...

概述

在大表DDL场景中,DDL操作会触发大量的IO操作,因此分布式存储的额外延迟对DDL会有一定的性能影响。针对这类问题,PolarDB 在DDL IO路径上主要实现了以下功能:DDL预读:DDL在构建索引过程中开启预读线程,减少IO读延迟。DDL异步IO:DDL在...

V5.1.x系列实例版本说明

解决DISTINCT在部分跨库JOIN场景下会出现报错的问题。修复分库分表情况下聚合函数查询带LIMIT时返回结果不正确的问题。解决BigDecimal类型在类型转换过程会消耗大量CPU的问题。修复SHOW FULL STATS连接数不准确的问题。修复SHOW FULL STATS...

回切至本地物理机

如果扩充的是包含系统分区的磁盘,那么扩充的这部分空间会被ECS自动填充给系统分区,这样在恢复到本地的物理机时可能会出现分区越界的问题。如果系统分区相对源端机器被扩容,将会收缩相应的空间,确保和源端机器保持一致。反向注册。确认...

管理 DDL 任务

通过数据访问代理中的任务管理模块,能直观地对执行过的 DDL 任务进行审计操作,在执行 DDL 任务时查看当前的执行进度,并在出现问题时快速定位到执行出错的位置与详细信息。任务管理模块针对执行出错的 DDL 任务提供出错处理机制。您可以...

变更表类型及分区策略(AUTO模式)

常见问题 Q:为什么有时分区变更的DDL任务执行失败?此时该如何处理?A:实例崩溃或唯一索引存在冲突等因素导致分区变更的DDL任务执行失败。但这不会损坏原表任何数据,也不会阻塞正常的DML和查询语句执行。当分区变更的DDL任务执行...

变更表类型及拆分规则(DRDS模式)

常见问题 Q:为什么有时拆分键变更的DDL任务执行失败?此时该如何处理?A:实例崩溃或唯一索引存在冲突等因素导致拆分规则变更的DDL任务执行失败。但这不会损坏原表任何数据,也不会阻塞正常的DML和查询语句执行。当拆分键变更的DDL...

ack-node-repairer

当节点出现故障时,自愈系统自动对故障所在节点触发相应的修复操作。当故障被修复后,NPD修改故障状态,达到故障检测以及修复的闭环。运维人员也可以自定义需要采取修复操作的故障以及具体的修复操作。NPD是Kubernetes节点诊断的工具,...

PolarDB MySQL版5.7版本发布日志

修复对分区表执行修改分区的DDL语句后,新的Insert请求会出现autoinc duplicate key的问题。5.7.1.0.31 类别 说明 发布时间 新增功能和性能优化 提升低并发场景下Thread Pool处理建连请求的速度。2024-01-31 问题修复 修复使用逻辑预读功能...

在PolarDB-X 1.0上执行DDL操作提示“Lock conflict”...

Lock conflict,maybe last DDL is still running 问题原因 PolarDB-X 1.0执行DDL操作加库级锁,同一时间只允许一个DDL执行,并行执行DDL或者在一些原因下锁可能没有释放,导致报错。解决方案 请执行以下操作进行解决:使用命令行或者其他...

如何解决增量迁移延迟或同步延迟

比如,当目标库实例为 云原生数据仓库 AnalyticDB MySQL 版(AnalyticDB for MySQL)时,如源库执行变更字段类型的DDL操作,导致DTS同步任务出现延迟,处于 重试中 状态。这是因为目标实例 云原生数据仓库 AnalyticDB MySQL 版...

步骤五:应用容灾

故障恢复 本机出现故障后在云上拉起本地业务,待本地环境恢复后再将其恢复到本地。具体步骤如下:在 主站点管理 页签,单击+添加。在 添加计算平台 页面,填写计算平台 名称,选择 类型,填写 IP地址、用户名 和 密码。单击 创建。在连续...

RDS MySQL活跃线程数高问题

排查元数据锁(MDL)问题 现象 出现MDL锁时,导致大量SQL处于 Waiting for table metadata lock 的状态,在DDL prepare和commit阶段,DDL语句需要获取MDL锁,如果表上有未提交事务或慢SQL,阻塞DDL操作,DDL操作又阻塞其他的SQL,...

主键与唯一键(AUTO模式)

执行如下所示变更分区策略的DDL,使得city为“Beijing”和“Shenzhen”的数据存储在同一个分区,DDL会执行失败,报主键冲突的错误。这是因为该DDL使得主键重复的数据出现在同一个分区,违反了Local主键的分区内唯一性。ALTER TABLE list_...

PolarDB-X 1.0在DMS控制台上无法显示修改后的表结构

在处理异常DDL过程中,由于种种原因可能会出现库表结构已经修改,但是影子库中的表结构却未修改的现象。此时您需连接到影子库,在该库中重新对表进行一次DDL操作即可。说明:CHECK TABLE不会检测影子库表结构与 PolarDB-X 1.0 逻辑库表结构...

如何处理DDL异常

KILL DDL操作很可能会导致该锁没有释放,此时再执行DDL会出现以下报错:Lock conflict,maybe last DDL is still running 此时执行RELEASE DBLOCK命令释放该锁即可。指令取消及锁释放后,您可以选择在业务低谷或者停止期间,重新执行该DDL。...

配置同步任务(新控制台)

源库、目标库出现其他问题后的重试时间 在同步任务启动后,若源库或目标库出现非连接性的其他问题(如DDL或DML执行异常),则DTS报错并立即进行持续的重试操作,默认持续重试时间为10分钟,您也可以在取值范围(1~1440分钟)内自定义重...

RDS MySQL Online DDL 使用

DDL操作执行时需要修改表的元数据(metadata),有可能遇到等待表元数据锁的情况(waiting for table metadata lock),该情况的处理方式请参见 解决MDL锁导致无法操作数据库的问题。Inplace和Copy Table是相反的2种处理方式;但即使DDL...

RDS MySQL Online DDL 使用

DDL操作执行时需要修改表的元数据(metadata),有可能遇到等待表元数据锁的情况(waiting for table metadata lock),该情况的处理方式请参见 解决MDL锁导致无法操作数据库的问题。Inplace和Copy Table是相反的2种处理方式;但即使DDL...

配置数据同步任务

类型 说明 源库限制 待同步的表需具备主键或唯一约束,且字段具有唯一性,否则可能导致目标数据库中出现重复数据。如同步对象为表级别,且需进行编辑(如表列名映射),则单次同步任务仅支持同步至多1000张表。当超出数量限制,任务提交...

V5.2.x系列实例版本说明

修复一个数据库在被多个 PolarDB-X 1.0 实例同时引用时会出现的实例间建表或删表结果不一致的问题。修复因低版本的Fastjson安全缺陷造成的 PolarDB-X 1.0 安全风险问题。修复 PolarDB-X 1.0 的 LAST_INSERT_ID()返回值情况与MySQL不完全...

配置数据迁移任务

待迁移的表需具备主键或唯一约束,且字段具有唯一性,否则可能导致目标数据库中出现重复数据。如迁移对象为表级别,且需进行编辑(如表列名映射),则单次迁移任务仅支持迁移至多1000张表。当超出数量限制,任务提交后显示请求报错,...

非阻塞DDL

Nonblock DDL规避了执行DDL过程中MDL锁长时间获取不成功导致的连接堆积和阻塞,有效地解决了DDL导致的锁表问题。背景信息 用户在执行DDL操作的时候,若目标表存在未提交的长事务或大查询,DDL将持续等待获取MDL-X锁。在 PolarDB 中由于MDL-...

RDS MySQL如何管理长时间执行的查询

出现原因 在使用RDS MySQL的过程中,由于某些原因,例如被SQL注入、SQL执行效率较差、DDL语句引起表元数据锁等待等,会出现运行时间很长的查询。说明:元数据锁等待的问题请参考 解决MDL锁导致无法操作数据库的问题。由于SQL执行效率差而...

任务管理概述

因此,数据访问代理提供一整套针对 DDL 任务的管理体系与界面,方便您直观地对执行过的 DDL 进行审计操作,您也可以在执行 DDL 任务时查看当前的执行进度,出现问题时快速定位到执行出错的位置与详细信息。数据访问代理中的任务管理模块...

最佳实践

背景信息 新的DDL任务引擎启用时,当DDL执行失败或者被意外中断后,对应的DDL任务处于PENDING待处理的状态。此时必须对该PENDING状态进行合适的任务处理,才能解除PENDING状态并恢复正常访问,否则后续的DDL被禁止执行并报错。处理...

响应云盒维修事件

流程说明 运行中的ECS实例出现故障风险时,向您发送ECS故障 事件(Reboot事件)通知,收到ECS故障事件通知后,您可以响应故障事件并按照建议进行处理,例如:将现有业务迁移到冗余资源保证业务正常运行,将出现故障风险的ECS实例作为备机...

一键MaxCompute任务出错恢复

场景分类 相关文档 Binlog无丢失场景及全增量同步任务 Binlog无丢失 Binlog有丢失场景及全增量同步任务 Binlog有丢失 Merge任务的报错失败场景及全增量同步任务 Merge任务的报错失败 Binlog无丢失 出现不支持的DDL导致实时任务失败 ...

DDL脚本

数据库模式定义语言DDL(Data Definition Language)是用于描述数据库中要存储的现实世界实体的语言。创建语句 设计好的数据库模型,您可以单击 生成DDL脚本,进入 DDL Script编辑器。在 DDL Script编辑器 页面中,对象过滤 用于过滤需要...

多表归并任务中执行Online DDL操作导致目标库数据丢失

问题描述 在通过DTS进行多表归并任务时,若在源库进行Online DDL操作,对源库的表结构等进行了调整修改,则同步到目标库时,会出现数据丢失的情况。说明 多表归并任务指将不同源库的表进行归并,继而同步或迁移到目标库。例如:当用户配置...

MySQL四种能规避因数据库变更导致锁表问题的功能

会出现日志空间不足问题会出现“Duplicated Key”错误。容易导致只读实例复制延迟。部分操作不支持并发DML。无法暂停。受MDL表元数据锁限制。RDS for MySQL Online DDL使用 RDS for MySQL表上Metadata Lock的产生和处理 Online DDL操作...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
商标服务 负载均衡 Web应用防火墙 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用