迁移 OceanBase 数据库 Oracle 租户的增量数据至 ...
如果源端和目标端的表结构不完全一致，可能会出现数据不一致的情况。目前已知场景如下：用户手动创建表结构时，因超出数据传输的支持范围，可能产生隐式的转换问题导致源端和目标端列的类型不一致。目标端的数据长度小于源端的数据长度时，...
时序引擎版本说明
功能优化 修复表反复删除可能会出现数据漏删除的问题。修复写入整数到两个列失败的问题。修复嵌套子查询单列降采样时报错的问题。3.4.6 2022年01月11日 新特性 InfluxDB行协议支持指定Schema策略，支持按需创建Schema。TSQL DATABASE/TABLE...
OceanBase 数据库之间的数据迁移
如果源端和目标端的表结构不完全一致，可能会出现数据不一致的情况。目前已知场景如下：用户手动创建表结构时，因超出数据传输的支持范围，可能产生隐式的转换问题导致源端和目标端列的类型不一致。目标端的数据长度小于源端的数据长度时，...
迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库...
如果源端和目标端的表结构不完全一致，可能会出现数据不一致的情况。目前已知场景如下：用户手动创建表结构时，因超出数据传输的支持范围，可能产生隐式的转换问题导致源端和目标端列的类型不一致。目标端的数据长度小于源端的数据长度时，...
迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL ...
如果源端和目标端的表结构不完全一致，可能会出现数据不一致的情况。目前已知场景如下：用户手动创建表结构时，因超出数据传输的支持范围，可能产生隐式的转换问题，导致源端和目标端列的类型不一致。目标端的数据长度小于源端的数据长度时...
迁移 OceanBase 数据库 MySQL 租户的数据至 MySQL ...
如果源端和目标端的表结构不完全一致，可能会出现数据不一致的情况。目前已知场景如下：用户手动创建表结构时，因超出数据传输的支持范围，可能产生隐式的转换问题导致源端和目标端列的类型不一致。目标端的数据长度小于源端的数据长度时，...
迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL ...
如果源端和目标端的表结构不完全一致，可能会出现数据不一致的情况。目前已知场景如下：用户手动创建表结构时，因超出数据传输的支持范围，可能会产生隐式的转换问题，导致源端和目标端列的类型不一致。目标端的数据长度小于源端的数据长度...
迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库...
如果源端和目标端的表结构不完全一致，可能会出现数据不一致的情况。目前已知场景如下：用户手动创建表结构时，因超出数据传输的支持范围，可能会产生隐式的转换问题，导致源端和目标端列的类型不一致。目标端的数据长度小于源端的数据长度...
离线同步数据质量排查
对于数据同步质量（数据条数、数据内容）有相关疑问，在写出端您可以尝试从下列常见情况对照排查：原因 问题描述 解决方案 写出模式选择导致 Writer插件会使用选择的写出模式将源头数据在目标端执行重放，如果源头数据和目标表结构出现数据...
多表归并任务中执行Online DDL操作导致目标库数据丢失
问题描述 在通过DTS进行多表归并任务时，若在源库进行Online DDL操作，对源库的表结构等进行了调整修改，则同步到目标库时，会出现数据丢失的情况。说明 多表归并任务指将不同源库的表进行归并，继而同步或迁移到目标库。例如：当用户配置...
管理表结构版本
当您在 数据管理DMS 中对数据库进行表结构变更后，DMS将会保存最新的表结构至数据库版本列表中。您可以在数据库版本列表中下载、对比、恢复历史版本的表结构。前提条件 您具有该表（或库）的查询权限，更多信息，请参见 查看我的权限。表...
管理问题数据
问题数据表分区结构：分区级别 分区字段名 描述 一级分区 dqc_task_run_dt 当前问题数据的采集时间，即数据质量规则运行时间（格式为yyyymmdd）。二级分区 dqc_task_id 当前问题数据采集对应的DQC规则实例ID。说明 DQC规则执行将产生DQC...
查询与变更表结构
注意事项 变更表结构可能会对您的数据库与业务造成影响，需谨慎操作。查询表结构 以查看test_table表结构举例。使用SQL语句查询表结构 进入SQL Console。在 SQL Console 窗口中，左键双击表名，系统将自动生成查询表的SQL语句，再单击 执行...
创建OSS外部表
MaxCompute支持您在项目中创建OSS（Object Storage Service）外部表，与存储服务OSS上的目录建立映射关系，您可以通过OSS外部表访问OSS目录下的数据文件中的非结构化数据，或将MaxCompute项目中的数据写入OSS目录。本文为您介绍创建OSS外部...
库表结构优化
要做好库表结构设计和优化，用户通常需要关注以下信息：数据库引擎架构 用户需要了解数据库引擎的存储和计算架构特点，才能结合业务的数据分布特征与业务场景特征，进行数据建模，从而设计出符合引擎架构特点的数据表结构。SQL特征差异 ...
RDS SQL Server间的同步
当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待同步的表，分批配置任务。不支持同步内存优化表。DTS是用fn_log函数获取源库日志，而该函数有一定的性能瓶颈，请不要过早清理源库日志，否则可能会导致任务失败。数据日志...
确认表血缘
导致下游取数出现问题 若当前节点 Job_B 代码中配置了依赖A表的数据，但未将产出A表数据的节点 Job_A 作为当前节点依赖的上游，则可能会出现A表数据未产出，当前节点便开始执行，最终导致 Job_B 节点产出的表数据出现问题。虽然 Job_A 的...
全增量同步任务运维
强制重跑 在某些特殊情况下，例如发现源端数据被污染、数据链路出现问题等，您可以单击 操作 列 更多>强制重跑 强制对源端所有表进行全增量初始化操作，将源端数据重新迁移到目标表中，以快速恢复数据。说明 仅Hologres和MaxCompute支持...
EMR Hive数据整库离线同步至MaxCompute
说明 此处会展示Hive数据源开发环境地的表列表和表结构，如果您的Hive数据源开发和生产环境的表定义不同，则可能出现任务在开发环境配置正常但提交生产运行后报错表不存在、列不存在的问题。读取Hive方法 基于HDFS文件读取数据：Hive ...
EMR Hive数据整库离线同步至MaxCompute
说明 此处会展示Hive数据源开发环境地的表列表和表结构，如果您的Hive数据源开发和生产环境的表定义不同，则可能出现任务在开发环境配置正常但提交生产运行后报错表不存在、列不存在的问题。读取Hive方法 基于HDFS文件读取数据：Hive ...
RDS MySQL同步至AnalyticDB for PostgreSQL ...
表结构不一致的情况下，可能会导致无法初始化数据、只能同步部分列的数据或同步失败。实例级别选择所需同步的DDL和DML 按实例级别选择同步的DDL或DML操作，支持的同步操作，请参见 支持同步的SQL操作。说明 如需按库或表级别选择同步的SQL...
数据建模诊断
但是因为数据特征存在未知性或者随着业务特征变化会发生变化，所以可能存在分布字段选择不合理的情况，最终会导致数据倾斜问题，造成各个节点处理数据时资源使用不均衡，子任务出现长尾，最终影响查询性能。分布字段合理性诊断会帮助用户...
一键MaxCompute任务出错恢复
出现脏数据导致的实时任务报错 常见的场景有目标列类型和源端数据不兼容，查看实时任务运行日志、查看脏数据的输出内容，请确认是源端数据问题还是目标端问题，如果是目标表结构问题，可能需要重建目标表以恢复实时任务。重新加载表：需要...
查询结果不符合预期的常见原因
Lindorm宽表经常会被应用在大数据链路中，如果写入链路出现问题，则可能导致写入延迟或无法正常写入数据，此时进行数据查询，该行数据还未写入，因此会产生无法查询到数据的情况。如果您在使用中遇到数据写入一段时间后才能查到的情况，...
RDS SQL Server同步至云原生数据仓库AnalyticDB ...
当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待同步的表，分批配置任务。DTS是用fn_log函数获取源库日志，而该函数有一定的性能瓶颈，请不要过早清理源库日志，否则可能会导致任务失败。数据日志：需开启，备份模式设置...
自建HBase迁移至云原生数据仓库 AnalyticDB MySQL 版 ...
源库的操作限制：在库表结构迁移和全量迁移阶段，请勿执行库或表结构变更的DDL操作，否则数据迁移任务会失败。本场景暂不支持增量迁移，为保障数据一致性，数据迁移期间请勿在源实例中写入新的数据。其他限制 本场景支持库表结构迁移和全量...
迁移时源库为PolarDB-X 2.0的注意事项及限制
源库的操作限制：在库表结构迁移和全量迁移阶段，请勿执行库或表结构变更的DDL操作，否则数据迁移任务会失败。迁移期间如需切换 PolarDB分布式版 的网络类型，切换成功后，请调整迁移链路的网络连接信息。如仅执行全量数据迁移，请勿向源...
SQL查询
功能概览 功能 说明 添加目录 支持您将系统推荐目录及已授权的数据源下的数据表添加至目录，添加为目录后您可快速查看相应目录下的SQl文件或者数据表，对于数据表支持您快速查看表结构并快速生成查询SQL。创建SQL查询 您可新建SQL查询文件...
备份数据库
A：若备份库表存在表结构不合理、大表、大字段等情况，备份计划规格选择过小可能会导致后续备份计划资源不足，备份出现该异常的情况。建议您在购买时选择更高规格的备份计划，或在出现异常后请先尝试 升级备份计划 至较高规格，再重新尝试...
Teradata迁移至云原生数据仓库 AnalyticDB PostgreSQL...
源库的操作限制：在库表结构迁移和全量迁移阶段，请勿执行库或表结构变更的DDL操作，否则数据迁移任务会失败。本场景暂不支持增量迁移，为保障数据一致性，数据迁移期间请勿在源实例中写入新的数据。其他限制 目前仅支持在上海、青岛、...
RDS MySQL修改字符集（平滑方案）
由于业务需求，需要变更表的字符集（例如从gbk变更为utf8mb4），如果直接使用ALTER命令修改字符集会锁表，当数据表过大时，对业务的影响较大。本文介绍的操作方法需要先在目标实例中创建表结构信息（新字符集），再通过DTS将源实例的数据...
SQL Console新交互模式下变更表数据和结构（公测中）
备份：在变更前对数据进行备份，便于出现问题时将数据回滚到变更前的状态。更多信息，请参见 SQL备份与回滚。单击 直接执行 或 后台异步执行。查看执行结果。在执行结果区域，单击，查看任务详情，包含执行的脚本、日志、获取备份和任务...
2023年
无 缺陷修复 修复智能诊断功能统计表大小时可能会出现数字溢出的问题，现已将统计表大小的列由integer数据类型修改为bigint数据类型。修复分区表UPDATE分布键列时出现 tuple already updated by self 错误信息的问题。修复Master节点不回收...
迁移时源库为PolarDB MySQL版的注意事项及限制
源库的操作限制：在库表结构迁移和全量迁移阶段，请勿执行库或表结构变更的DDL操作，否则数据迁移任务会失败。如仅执行全量数据迁移，请勿向源实例中写入新的数据，否则会导致源和目标数据不一致。为实时保持数据一致性，建议选择结构迁移...
迁移时源库为MySQL的注意事项及限制
源库的操作限制：在库表结构迁移和全量迁移阶段，请勿执行库或表结构变更的DDL操作，否则数据迁移任务会失败。如仅执行全量数据迁移，请勿向源实例中写入新的数据，否则会导致源和目标数据不一致。为实时保持数据一致性，建议选择结构迁移...
常见错误码及排查方法
解决方法：检查表结构和DML语句涉及的记录，确保源和目的表结构一致，或者订正数据后重启任务。DTS-70004:execute statement failed:/*s2gb356ds228bt8MysqlEngine(0)*/insert into `xxx`.`yyy`(`.`)values(.)error detail message:INSERT ...
如何解决增量迁移延迟或同步延迟
解法7：检查目标库实例的锁状态、慢SQL以及表结构，然后调整目标库写入或者目标库表结构来解决目标库写入锁以及慢SQL问题。本案例以MySQL数据库为例，介绍锁状态和慢SQL、库表结构的查询方式，以及对应解决方式。锁状态和慢SQL：使用命令 ...
迁移时源库为Oracle的注意事项及限制
建议使用DTS的库表结构迁移功能，否则可能会因为数据类型不兼容而导致任务失败。源库和目标库的时区必须保持一致。您自定义的Type可以迁移到目标 PolarDB PostgreSQL版（兼容Oracle）集群，Oracle自动生成的Type Object（即内置对象）不会...
迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
对于无主键且包含 LOB 类型字段的表，反向增量会出现数据质量问题。数据源标识和用户账号等，在数据传输系统内全局唯一。Oracle 数据库的增量日志解析最大支持 5T/天。Oracle 数据库 11G 及之前版本不支持创建超过 30 个字节的数据库对象。...
流式数据通道概述
热数据存储量会出现增长情况：在开启异步处理的场景下（Merge或Zorder），MaxCompute流式数据通道服务会对最近一小时写入的数据保存两份，一份为原始数据，一份为异步聚合后的数据，数据的存储量会有一定程度的冗余。冗余数据的保存周期...
- 产品推荐
- 这些文档可能帮助您