对于无主键且包含 LOB 类型字段的表,反向增量会出现数据质量问题。如果源端字符集为 UTF-8,建议目标端使用兼容源端的字符集(例如,UTF-8、UTF-16 等),避免产生因字符集不兼容导致目标端出现乱码等问题。节点之间的时钟不同步,或者...
详细信息 数据库迁移过程中,会出现数据库中断或者闪断的情况。如出现闪断的情况,请参见 更多信息。以下是不同数据库迁移到RDS的方法。RDS MySQL版 关于将MySQL数据库迁移到RDS,请参见 从自建MySQL迁移至RDS for MySQL。RDS SQL Server版...
随着业务的发展,业务数据库(MaxCompute数据仓库的数据源)会出现数据库扩容或者DDL变更,这些变更都要主动通知到离线开发人员。基于MaxCompute的数据仓库在进行离线数据抽取时,通过DataWorks的数据集成工具,可能会限制某个业务数据库表...
修复最新值查询在扩容后可能会出现返回多条数据的问题。修复降采样查询中不支持常量折叠计算的问题。修复正则查询降采样数据时间条件不生效的问题。3.4.10 2022年02月28日 新特性 SQL查询语句tags支持通过正则表达式过滤。支持non_negative...
随着业务的快速发展,企业数据呈几何倍增长,数据量庞大、复杂、各类数据间标准不一致,往往会出现数据难以管理的现象。DataWorks智能数据建模服务,将无序、杂乱、繁琐、庞大且难以管理的数据,进行结构化有序的管理。使企业中的数据产生...
说明 写入方式为insert时,会出现FLOAT类型数据错误的问题。column_name AnalyticDB for MySQL 2.0集群中表的列名。同步整个库的元数据(Meta)。meta-sync database database_name to catalog_name;参数 说明 database_name AnalyticDB ...
由于 PolarDB-X 1.0 支持分库分表,源 PolarDB-X 1.0 的某一DDL指令会在所有分表上执行对应的DDL操作,并且每个订阅子任务的进度并不一致,因此DTS的订阅数据可能陆续包含多条此DDL操作,如您多次消费此类DDL操作,可能会导致订阅客户端...
修复在只读实例上使用包含 auto_increment_increment 变量的命令会出现的NPE问题。修复GSI DDL任务恢复后可能会导致不同随机后缀物理表遗留的问题。修复DDL命令执行过程中偶发性的死锁问题。修复当使用CHECK TABLE检查单表时,系统只检查...
参数调优策略 当Routine Load出现性能问题时,您可以考虑从如下几个维度来进行参数调优:任务调度周期 您可以通过缩短任务调度周期(即修改参数max_batch_interval)加速数据消费。但是,缩短任务调度周期可能会带来更多的CPU资源消耗。...
修复由于栅格数据带有 NAN 和 INF 等数据,在导入和统计值会出错的问题。4.3 新特性 ST_PixelAsPolygon:将栅格像素转换为Polygon对象。ST_PixelAsPolygons:将栅格像素转换为Polygon对象集合。ST_PixelAsPoint:将栅格像素转换为基于点...
问题现象 补数据选择业务时间昨天和今天,会出现等待时间的情况。产生原因 从平台维度来看,业务时间昨天的数据,今天调度运行。补数据补对应业务时间的数据相当于重新执行了一次对应业务时间的周期实例。如果您需要过滤今天的周期实例,您...
当执行完 ALTER TABLE.EXCHANGE PARTITION 命令后,最初在 target_partition 中的数据就会交换到 source_table 中,而最初在 source_table 中的数据则会交换到 target_partition 中。WITHOUT VALIDATION 选项表示不对单表的数据是否符合...
解决DISTINCT在部分跨库JOIN场景下会出现报错的问题。修复分库分表情况下聚合函数查询带LIMIT时返回结果不正确的问题。解决BigDecimal类型在类型转换过程会消耗大量CPU的问题。修复SHOW FULL STATS连接数不准确的问题。修复SHOW FULL STATS...
修复并发插入数据过程中,会出现误报主键冲突的问题。2023年04月(V2.0.0.2)类别 功能 功能描述 相关文档 缺陷修复 修复实时写入时,执行Flush、Compact以及并发DDL等操作可能出错的问题。2023年03月(V2.0.0.1)类别 功能 功能描述 相关...
当操作类型依赖value原始值时,在交换的情况下可能会出现乱序甚至丢失的情况。说明 可能造成类似问题的还有、lpush,lpop、append、sort(store)、del、hdel、incr、xadd 系列等操作。类型不一致 子实例A在1.1时刻收到命令(key->T(hash)...
当操作类型依赖value原始值时,在交换的情况下可能会出现乱序甚至丢失的情况。说明 可能造成类似问题的还有、lpush,lpop、append、sort(store)、del、hdel、incr、xadd 系列等操作。类型不一致 子实例A在1.1时刻收到命令(key->T(hash)...
整个数据库系统的缓存区域,是数据交换最为频繁的位置,如果内存不足和内存页争抢,则会出现各种异常的堆积和慢查询。最典型的表现是数据库突然CPU上涨打满,并且出现慢查询。经过排查后发现该问题并非索引缺失,这个时候就有可能是内存...
背景信息 随着业务的发展,数据库会出现升降配、数据库整体迁移的需求,为支持此类业务场景,DMS推出数据库迁移功能,支持对多种数据库的结构、数据进行同构迁移,同时支持库名称修改、迁移前预校验、迁移后数据一致性校验及来源数据库的...
示例如下:创建一个与分区表相同表结构的非分区表来做exchange,DDL结束后分区数据会被交换出去,原来的分区会变为空分区。DELIMITER|CREATE EVENT IF NOT EXISTS exchange_partition ON SCHEDULE EVERY 1 DAY STARTS '2022-05-21 02:00:00'...
影响 切换过程会出现实例切换,请确保应用程序具有重连机制。实例切换的影响请参见 实例切换的影响。切换专有网络VPC和虚拟交换机会造成虚拟IP(VIP)的变更,请您在应用程序中尽量使用 连接地址 进行连接,不要使用IP地址。VIP的变更会...
日志服务 设备在运行过程中,可能会出现一些异常。例如连接失败、认证失败、设备上报的数据不符合物模型规范等,您可以通过 日志服务 查看和排查问题。例如,上述案例的 云端配置 中已定义属性参数 acOutMeterIty 为整型,当真实设备上报的...
支持简单易用的数据交换、处理、订阅等能力,满足用户的数据迁移、实时订阅、数湖转存、数仓回流、单元化多活、备份恢复等需求,实现面向云HBase的一站式数据生态服务。核心能力 云原生分布式:LTS是一个基于ECS部署的分布式系统,具备良好...
另外,Cassandra 需要定期对所有副本进行全量数据修复,否则会出现”幽灵key“等问题,但是修复过程会因为消耗大量系统资源从而影响服务稳定性。而Lindorm由底层的存储组件负责一致性,当您的数据写入时,就会按照您设定的副本数写入,不会...
例如,uk(name)=a先后被id=1和id=2的数据所持有,但因无法保证 delete(id=1,name=1)和 insert(id=2,name=a)在目标库的执行顺序,当 insert(id=2,name=2)先于 delete(id=1,name=1)执行时,会出现写入冲突。此类场景建议设置拆分级别为表级。...
无 缺陷修复 修复智能诊断功能统计表大小时可能会出现数字溢出的问题,现已将统计表大小的列由integer数据类型修改为bigint数据类型。修复分区表UPDATE分布键列时出现 tuple already updated by self 错误信息的问题。修复Master节点不回收...
如果源库中待迁移的表没有主键或唯一约束,且所有字段没有唯一性,可能会导致目标数据库中出现重复数据。对于数据类型为FLOAT或DOUBLE的列,DTS会通过 ROUND(COLUMN,PRECISION)来读取该列的值。如果没有明确定义其精度,DTS对FLOAT的迁移...
支持简单易用的数据交换、处理、订阅等能力,满足用户的数据迁移、实时订阅、数湖转存、数仓回流、单元化多活、备份恢复等需求,实现面向Lindorm的一站式数据生态服务。核心能力 云原生分布式:LTS是一个基于ECS部署的分布式系统,具备良好...
DDL原理简介 PolarDB-X 1.0 的DDL指令会在所有分表上执行对应的DDL操作。失败的情况可以分为两类:DDL在分库执行失败。DDL在任意分库执行出错都可能导致各分表结构不一致。分库执行报错的原因多种多样,如建表时表已存在、加列时列已存在等...
导致下游取数出现问题 若当前节点 Job_B 代码中配置了依赖A表的数据,但未将产出A表数据的节点 Job_A 作为当前节点依赖的上游,则可能会出现A表数据未产出,当前节点便开始执行,最终导致 Job_B 节点产出的表数据出现问题。虽然 Job_A 的...
您授权允许 数据安全中心(DSC)访问MaxCompute、RDS和对象存储OSS数据时,可能会出现授权失败的情况。您可以参考以下原因排查数据授权问题。RDS连接授权失败有哪些原因?RDS数据库账号或密码输入错误。您自行删除了RDS访问白名单中 DSC ...
A:切换域名后,可能会存在DNS解析缓存问题,在缓存过期时间内可能会出现连接不上数据库或数据库只支持读操作而无法执行写入操作等情况,建议您刷新一下服务器的DNS缓存。Q:升级切换后,为什么在 PolarDB 控制台上看不见 完成升级 按钮?A...
对于无主键且包含 LOB 类型字段的表,反向增量会出现数据质量问题。数据源标识和用户账号等,在数据传输系统内全局唯一。Oracle 数据库的增量日志解析最大支持 5T/天。Oracle 数据库 11G 及之前版本不支持创建超过 30 个字节的数据库对象。...
如果您需要将一个 云数据库 Redis 版 实例的数据迁移到另一个 云数据库 Redis 版 实例中,且您未创建新实例,推荐您通过 备份集克隆、数据闪回功能 将数据克隆至新实例,若您已创建新实例,建议您通过数据传输服务DTS(Data Transmission ...
警告 RDS基础系列实例只有一个数据库节点,没有备节点作为热备份,因此当该节点意外宕机或者执行重启实例、变更配置、版本升级等任务时,会出现较长时间的不可用。如果业务对数据库的可用性要求较高,不建议使用基础系列实例,可选择其他...
警告 RDS基础系列实例只有一个数据库节点,没有备节点作为热备份,因此当该节点意外宕机或者执行重启实例、变更配置、版本升级等任务时,会出现较长时间的不可用。如果业务对数据库的可用性要求较高,不建议使用基础系列实例,可选择其他...
说明 RDS基础系列实例只有一个数据库节点,没有备节点作为热备份,因此当该节点意外宕机或者执行重启实例、变更配置、版本升级等任务时,会出现较长时间的不可用。如果业务对数据库的可用性要求较高,不建议使用基础系列实例,可选择其他...
数据同步网络连通问题 在做离线同步时,我们需要先了解哪些DataWorks及其网络能力?同步ECS自建的数据库的数据时,如何保障数据库与DataWorks的网络连通?数据库和DataWorks不在同一个地域(Region)下,进行数据同步时如何保障数据库与...
本文介绍PolarDB PostgreSQL版时空数据库(Ganos)的版本更新说明。6.X 6.3 类别 说明 新增特性 Trajectory SQL 新增 ST_InsertAttr 函数,支持为轨迹增加新的属性。GeomGrid SQL 新增 ST_Degeneralize 函数,支持将低层级网格分解成高层级...
本文介绍PolarDB PostgreSQL版(兼容Oracle)时空数据库(Ganos)的版本更新说明。6.X 6.3 类别 说明 新增特性 Trajectory SQL 新增 ST_InsertAttr 函数,支持为轨迹增加新的属性。GeomGrid SQL 新增 ST_Degeneralize 函数,支持将低层级...
Lindorm宽表经常会被应用在大数据链路中,如果写入链路出现问题,则可能导致写入延迟或无法正常写入数据,此时进行数据查询,该行数据还未写入,因此会产生无法查询到数据的情况。如果您在使用中遇到数据写入一段时间后才能查到的情况,...