详细信息 数据库迁移过程中,会出现数据库中断或者闪断的情况。如出现闪断的情况,请参见 更多信息。以下是不同数据库迁移到RDS的方法。RDS MySQL版 关于将MySQL数据库迁移到RDS,请参见 从自建MySQL迁移至RDS for MySQL。RDS SQL Server版...
修复最新值查询在扩容后可能会出现返回多条数据的问题。修复降采样查询中不支持常量折叠计算的问题。修复正则查询降采样数据时间条件不生效的问题。3.4.10 2022年02月28日 新特性 SQL查询语句tags支持通过正则表达式过滤。支持non_negative...
如果源端和目标端的表结构不完全一致,可能会出现数据不一致的情况。目前已知场景如下:用户手动创建表结构时,因超出数据传输的支持范围,可能产生隐式的转换问题导致源端和目标端列的类型不一致。目标端的数据长度小于源端的数据长度时,...
当超出数量限制,会出现稳定性和性能问题的风险,此时建议您拆分待同步的表,分批配置任务。不支持同步内存优化表。DTS是用fn_log函数获取源库日志,而该函数有一定的性能瓶颈,请不要过早清理源库日志,否则可能会导致任务失败。数据日志...
修复由于栅格数据带有 NAN 和 INF 等数据,在导入和统计值会出错的问题。4.3 新特性 ST_PixelAsPolygon:将栅格像素转换为Polygon对象。ST_PixelAsPolygons:将栅格像素转换为Polygon对象集合。ST_PixelAsPoint:将栅格像素转换为基于点...
例如,CPU、内存、网络等互相影响,可能会导致离线任务变慢或实时任务延迟等问题,甚至在资源不足的极端情况下,可能会出现任务被OOM KILLER杀掉等问题。步骤八:执行同步任务 进入 数据集成>同步任务 界面,找到已创建的同步方案。单击...
如果源端和目标端的表结构不完全一致,可能会出现数据不一致的情况。目前已知场景如下:用户手动创建表结构时,因超出数据传输的支持范围,可能产生隐式的转换问题导致源端和目标端列的类型不一致。目标端的数据长度小于源端的数据长度时,...
如果源端和目标端的表结构不完全一致,可能会出现数据不一致的情况。目前已知场景如下:用户手动创建表结构时,因超出数据传输的支持范围,可能产生隐式的转换问题导致源端和目标端列的类型不一致。目标端的数据长度小于源端的数据长度时,...
问题现象 补数据选择业务时间昨天和今天,会出现等待时间的情况。产生原因 从平台维度来看,业务时间昨天的数据,今天调度运行。补数据补对应业务时间的数据相当于重新执行了一次对应业务时间的周期实例。如果您需要过滤今天的周期实例,您...
如果源端和目标端的表结构不完全一致,可能会出现数据不一致的情况。目前已知场景如下:用户手动创建表结构时,因超出数据传输的支持范围,可能会产生隐式的转换问题,导致源端和目标端列的类型不一致。目标端的数据长度小于源端的数据长度...
如果源端和目标端的表结构不完全一致,可能会出现数据不一致的情况。目前已知场景如下:用户手动创建表结构时,因超出数据传输的支持范围,可能产生隐式的转换问题,导致源端和目标端列的类型不一致。目标端的数据长度小于源端的数据长度时...
如果源端和目标端的表结构不完全一致,可能会出现数据不一致的情况。目前已知场景如下:用户手动创建表结构时,因超出数据传输的支持范围,可能产生隐式的转换问题导致源端和目标端列的类型不一致。目标端的数据长度小于源端的数据长度时,...
如果源端和目标端的表结构不完全一致,可能会出现数据不一致的情况。目前已知场景如下:用户手动创建表结构时,因超出数据传输的支持范围,可能会产生隐式的转换问题,导致源端和目标端列的类型不一致。目标端的数据长度小于源端的数据长度...
对于数据同步质量(数据条数、数据内容)有相关疑问,在写出端您可以尝试从下列常见情况对照排查:原因 问题描述 解决方案 写出模式选择导致 Writer插件会使用选择的写出模式将源头数据在目标端执行重放,如果源头数据和目标表结构出现数据...
修复并发插入数据过程中,会出现误报主键冲突的问题。2023年04月(V2.0.0.2)类别 功能 功能描述 相关文档 缺陷修复 修复实时写入时,执行Flush、Compact以及并发DDL等操作可能出错的问题。2023年03月(V2.0.0.1)类别 功能 功能描述 相关...
例如,CPU、内存、网络等互相影响,可能会导致离线任务变慢或实时任务延迟等问题,甚至在资源不足的极端情况下,可能会出现任务被OOM KILLER杀掉等问题。步骤九:执行同步解决方案任务 进入 数据集成>同步任务 界面,找到已创建的同步方案...
当结构化数据与非结构化数据需要同时检索时,您可以使用 AnalyticDB PostgreSQL版 向量数据库的混合查询,既支持结构化字段过滤,也支持半结构化字段过滤,同时支持和文本字段的全文检索一起进行双路召回。混合检索简介 ANNS(Approximate ...
问题数据保留时长:问题数据默认保留15天,即该问题数据表生命周期为15天,若满足MaxCompute表的生命周期回收策略,问题数据将会删除。关于MaxCompute表生命周期定义详情请参见 生命周期。问题数据表分区结构:分区级别 分区字段名 描述 ...
只支持分析Redis数据结构和以下Tair自研数据结构:TairString、TairHash、TairGIS、TairBloom、TairDoc、TairCpc、TairZset,暂不支持分析其他Tair自研数据结构。如果目标Redis实例规格已发生变更,则不支持分析实例变更前的备份文件。暂不...
对于无主键且包含 LOB 类型字段的表,反向增量会出现数据质量问题。数据源标识和用户账号等,在数据传输系统内全局唯一。Oracle 数据库的增量日志解析最大支持 5T/天。Oracle 数据库 11G 及之前版本不支持创建超过 30 个字节的数据库对象。...
缺陷修复 修复开启全球多活后,集群架构实例在扩缩容时可能会小概率出现崩溃的问题。5.0.25 LOW 2023-01-13 功能优化 TairSearch全面支持分词器框架,更多信息请参见 Search分词器。TairSearch中的term和terms查询支持设置 lowercase 参数...
大数据系统以数据类型多(结构化、非结构化、半结构化)、数据量大(动辄PB级别)著称,某些巨头组织一天就能新增数十万甚至数百万张表,如此体量给数据分级分类带来了极大挑战,通过人工进行数据分级分类显然是不现实的,难免会出现遗漏的...
类型 说明 源库限制 待同步的表需具备主键或唯一约束,且字段具有唯一性,否则可能会导致目标数据库中出现重复数据。如同步对象为表级别,且需进行编辑(如表列名映射),则单次同步任务仅支持同步至多1000张表。当超出数量限制,任务提交...
出现脏数据导致的实时任务报错 常见的场景有目标列类型和源端数据不兼容,查看实时任务运行日志、查看脏数据的输出内容,请确认是源端数据问题还是目标端问题,如果是目标表结构问题,可能需要重建目标表以恢复实时任务。重新加载表:需要...
热数据存储量会出现增长情况:在开启异步处理的场景下(Merge或Zorder),MaxCompute流式数据通道服务会对最近一小时写入的数据保存两份,一份为原始数据,一份为异步聚合后的数据,数据的存储量会有一定程度的冗余。冗余数据的保存周期...
任务运行在独享数据集成资源上,日志中会出现如下信息:running in Pipeline[basecommon_S_res_group_xxx]。如果凌晨任务调度时偶尔失败,但重跑又能成功,请检查数据库在报错时间点的负载情况。如何切换数据集成任务执行资源组?您可以在 ...
当超出数量限制,会出现稳定性和性能问题的风险,此时建议您拆分待同步的表,分批配置任务。DTS是用fn_log函数获取源库日志,而该函数有一定的性能瓶颈,请不要过早清理源库日志,否则可能会导致任务失败。数据日志:需开启,备份模式设置...
源库单机版Redis迁移至目标库为集群架构的操作限制:由于集群cluster只允许单个命令操作单个slot,若在源库执行多Key操作时,Key不在同一个slot或涉及多个slot,则会出现报错 CROSSSLOT Keys in request don't hash to the same slot 建议...
待迁移的表需具备主键或唯一约束,且字段具有唯一性,否则可能会导致目标数据库中出现重复数据。如迁移对象为表级别,且需进行编辑(如表列名映射),则单次迁移任务仅支持迁移至多1000张表。当超出数量限制,任务提交后会显示请求报错,...
无 缺陷修复 修复智能诊断功能统计表大小时可能会出现数字溢出的问题,现已将统计表大小的列由integer数据类型修改为bigint数据类型。修复分区表UPDATE分布键列时出现 tuple already updated by self 错误信息的问题。修复Master节点不回收...
问题类别 常见问题 数据类型 MaxCompute的时间类型字段是否可以不带时分秒?在执行MaxCompute SQL过程中,对DOUBLE类型的数据进行等值比较,为什么结果不符合预期?如何解决DECIMAL数据类型精度溢出问题?新创建的MaxCompute项目不支持数据...
数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器,可在 设置数据源 面板配置数据过滤器脚本,详情请参见 过滤器使用说明。数据结果 展示数据请求的响应结果。当数据源发生改变时,可单击右侧的 图标,...
待迁移的集合需具备主键或唯一约束,且字段具有唯一性,否则可能会导致目标数据库中出现重复数据。如迁移对象为集合级别,且需进行编辑(如集合的名称映射),则单次迁移任务仅支持迁移至多1000张集合。当超出数量限制,任务提交后会显示...
待迁移的表需具备主键或唯一约束,且字段具有唯一性,否则可能会导致目标数据库中出现重复数据。如迁移对象为表级别,且需进行编辑(如表列名映射),则单次迁移任务仅支持迁移至多1000张表。当超出数量限制,任务提交后会显示请求报错,...
导致下游取数出现问题 若当前节点 Job_B 代码中配置了依赖A表的数据,但未将产出A表数据的节点 Job_A 作为当前节点依赖的上游,则可能会出现A表数据未产出,当前节点便开始执行,最终导致 Job_B 节点产出的表数据出现问题。虽然 Job_A 的...
待迁移的表需具备主键或唯一约束,且字段具有唯一性,否则可能会导致目标数据库中出现重复数据。如迁移对象为表级别,且需进行编辑(如表列名映射),则单次迁移任务仅支持迁移至多1000张表。当超出数量限制,任务提交后会显示请求报错,...
说明 此处会展示Hive数据源开发环境地的表列表和表结构,如果您的Hive数据源开发和生产环境的表定义不同,则可能出现任务在开发环境配置正常但提交生产运行后报错表不存在、列不存在的问题。读取Hive方法 基于HDFS文件读取数据:Hive ...
说明 此处会展示Hive数据源开发环境地的表列表和表结构,如果您的Hive数据源开发和生产环境的表定义不同,则可能出现任务在开发环境配置正常但提交生产运行后报错表不存在、列不存在的问题。读取Hive方法 基于HDFS文件读取数据:Hive ...
迁移对象要求:待迁移的表需具备主键或唯一约束,且字段具有唯一性,否则可能会导致目标数据库中出现重复数据。说明 您也可以使用Oracle中的ROWID作为无主键和唯一约束表的主键。如果您的自建Oracle版本为12c及以上,待迁移表的名称长度需...
待迁移的表需具备主键或唯一约束,且字段具有唯一性,否则可能会导致目标数据库中出现重复数据。如迁移对象为表级别,且需进行编辑(如表列名映射),则单次迁移任务仅支持迁移至多1000张表。当超出数量限制,任务提交后会显示请求报错,...