Windows系统实例的宕机问题排查
更多信息，请参见 常见宕机原因和解决方案。方式二：通过系统事件定位 登录 ECS管理控制台，左侧导航栏单击 事件。在左侧导航栏单击 非预期运维事件。单击发生宕机运维事件实例右侧的 诊断操作系统错误根因，诊断实例宕机原因。根据返回的...
获取表内的通道信息
Stage：该通道所处的阶段，包括初始化（InitBaseDataAndStreamShard）、全量处理（ProcessBaseData）和增量处理（ProcessStream）三种。Expired：数据是否超期。如果该值返回true，请及时通过钉钉联系表格存储技术支持。ResponseInfo 返回...
获取通道的具体信息
Stage：该通道所处的阶段，包括初始化（InitBaseDataAndStreamShard），全量处理（ProcessBaseData）和增量处理（ProcessStream）三种。Expired：数据是否超期。如果该值返回true，请及时通过钉钉联系表格存储技术支持。List通道中的...
获取通道的具体信息
Stage：该通道所处的阶段，包括初始化（InitBaseDataAndStreamShard），全量处理（ProcessBaseData）和增量处理（ProcessStream）三种。Expired：数据是否超期。如果该值返回true，请及时通过钉钉联系表格存储技术支持。List通道中的...
Transaction Table2.0概述
如上图所示，如果使用单一的MaxCompute离线批量处理链路，有些场景需持续将用户分钟级增量数据和全量数据做合并处理和存储，产生冗余的计算和存储成本，也有场景需要将各种复杂的一些链路和处理逻辑转化成T+1的批次处理，极大增加链路复杂...
整体架构
Transaction Table2.0的增量存储和处理架构的特殊设计主要集中在五个模块：数据接入、计算引擎、数据优化服务、元数据管理、数据文件组织，其他部分与MaxCompute通用的架构一致。本文为您介绍Transaction Table2.0的核心架构要点。...
迁移任务一直卡在增量数据迁移阶段
概述 本文介绍迁移任务一直卡在增量数据迁移阶段的处理方法。详细信息 增量数据迁移阶段，会进行源实例跟目标实例增量数据实时同步，不会自动结束。建议增量数据迁移无延迟时，业务在目标实例验证通过后，将业务切换到目标实例，并手动结束...
10创建模型命名属性
模型命名属性用于为逻辑表提供命名规则，让逻辑表的命名更规范标准，本章节介绍如何创建刷新频率定义和增量定义的模型命名属性。前提条件 已新建工作组“信息中心(xxzx)”，具体操作，请参见 新建工作组。背景信息 模型命名规则是由“目录+...
修改告警
数据传输支持修改已启动告警监控功能的数据迁移和数据同步项目的告警监控设置。本文以数据迁移项目为例，为您介绍如何修改告警监控。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据迁移。如果您需要设置数据同步...
代码扫描能力
支持语言和规则 目前飞流支持扫描的语言和规则，如下表所示：语言 扫描能力 规则说明 Java 阿里巴巴规约扫描 根据阿里巴巴多年经验提炼的 总共7大类Java代码规则，包括：1）OOP规约 2）并发处理 3）控制语句4）命名规约 5）常量定义 6）...
设置告警
数据传输支持对数据迁移和数据同步项目进行监控项的配置。项目创建完成后，您可以对单个项目设置告警监控，也可以选择多个项目进行批量操作。本文以数据迁移项目为例，为您介绍如何设置告警监控。背景信息 告警监控功能是数据传输重要的运...
视频DNA
增量和存量可以一起通过该接口提交任务，完成视频DNA的处理。也可以待存量视频导入完成后，再通过 提交DNA作业 接口提交任务。视频处理结果查询。查询作业结果：您可以通过或回调接口 DNA作业结果反馈。处理结果中包含以下主要信息。作业...
批量操作数据迁移项目
正向切换的子步骤包括启动正向切换、切换预检查、启动目标端 Store、确认源端停写、确认同步追平停写位点、停止正向同步、执行数据库对象处理和启动反向增量。说明 正向切换的子步骤会根据创建项目时选择的迁移类型而变化。在 迁移项目列表...
迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle ...
背景信息 在数据传输控制台创建从 OceanBase 数据库 Oracle 租户迁移数据至 Oracle 数据库的数据迁移项目，您可以通过结构迁移、全量迁移和增量同步，无缝迁移源端数据库中的存量业务数据和增量数据至 Oracle 数据库。同时，数据传输支持将...
OceanBase 数据库之间的数据迁移
背景信息 您可以在数据传输控制台创建从 OceanBase 数据库迁移数据至 OceanBase 数据库同类型租户的数据迁移项目，通过结构迁移、全量迁移和增量同步，无缝迁移源端数据库中的存量业务数据和增量数据至目标端数据库。前提条件 数据传输已...
创建防护策略
增量备份策略 配置增量备份的 间隔周期 和 备份开始时间。增量备份是指在一次全备份或上一次增量备份后，备份与前一次相比增加或者有变化的数据。增量备份没有重复的备份数据，因此备份所需的防勒索容量较少，备份的时间较短。建议您设置为...
物化视图增量刷新（预览版）
增量刷新会通过特定算法，只计算变更部分的数据，然后定向更新物化视图中的数据，且增量刷新相较于全量刷新开销更低，可以更高频地更新。如果您仅需要刷新变更的数据，可以选择增量刷新物化视图。本文介绍如何在创建物化视图时指定增量刷新...
MySQL整库离线同步到OSS
全增量控制与周期控制 如果您的 同步步骤 勾选了 全量同步 和 增量同步，在全增量控制面板页面，默认展示一次性全量，周期性增量，不可更改。如果您的 同步步骤 选择了 全量同步，在全增量控制面板页面，可以选择任务的类型是一次性全量...
迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL ...
您可以通过结构迁移、全量迁移和增量同步等，无缝迁移源端数据库的存量业务数据和增量数据至 OceanBase 数据库 MySQL 租户。TiDB 数据库支持在线事务处理和在线分析处理（Hybrid Transactional and Analytical Processing，HTAP），是一款...
基本概念
本文将向您介绍DTS帮助文档中相关名词和术语的解释。名词 说明 预检查 为保障数据迁移任务/数据同步作业/数据订阅通道的顺利执行，在正式启动前，系统将执行预检查操作。例如，检查源库和目标库的连通性、数据库账号权限、Binlog设置、数据...
备份SQL Server
为避免灾难、硬件故障、数据丢失、损坏和意外删除事故发生，建议您通过 云备份 及时对SQL Server数据库进行备份。云备份 支持备份云服务器ECS实例或本地服务器中部署的SQL Server数据库，将数据 备份至云端。您可以随时根据时间点 恢复数据...
OceanBase 数据库 MySQL 租户之间的数据同步
同步类型包括 结构同步、全量同步 和 增量同步，增量同步 包括 DML 同步 和 DDL 同步，您可以根据需求进行自定义配置。详情请参见 自定义配置 DDL/DML。DML 同步 包括 Insert、Delete 和 Update，默认全部勾选。DDL 同步 支持 ADD COLUMN ...
查看数据同步项目的详情
启动数据同步项目后，您可以在数据同步项目的详情页面查看相应项目的基本信息、同步详情和同步对象等信息。进入详情页面 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据同步。单击目标数据同步项目的名称，进入详情页面，...
管理防护策略
增量备份策略 配置增量备份的 间隔周期 和 备份开始时间。增量备份是指在一次全备份或上一次增量备份后，备份与前一次相比增加或者有变化的数据。增量备份没有重复的备份数据，因此备份所需的防勒索容量较少，备份的时间较短。建议您设置为...
旧版使用场景
03-05 08:00 03-07 08:00 第一次增量 03-05 08:00~03-07 09:00之间增量数据 03-07 08:00~09:00 03-07 09:00 03-07 10:00 第二次增量 03-07 09:00~11:00之间增量数据 03-07 10:00~11:00 03-07 11:00 03-07 12:00 第三次增量 03-07 11:00~13:...
查看数据校验详情
若增量任务为单任务形式（不包含增量子任务），当增量写入模块首次达到延迟时间为零时，开始进行全量校验和增量校验。若增量任务包含多个增量子任务（例如MongoDB之间的实例迁移），当所有子任务的延迟都小于2秒时，开始进行全量校验和增量...
同步 OceanBase 数据库 MySQL 租户的数据至 Analytic...
同步类型包括 结构同步、全量同步 和 增量同步，增量同步 包括 DML 同步 和 DDL 同步，您可以根据需求进行自定义配置。详情请参见 自定义配置 DDL/DML。DML 同步 包括 Insert、Delete 和 Update，默认全部勾选。DDL 同步 支持 ADD COLUMN ...
迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库...
全量迁移和增量同步过程中，数据传输会以 Session 级别暂时禁用约束检查和外键级联操作。如果源库存在级联更新、删除等操作，可能导致源端和目标端的数据不一致。如果您在数据迁移过程中切换 PolarDB-X 2.0 数据库的网络类型，请在切换成功...
使用Tapdata Cloud导入MySQL数据
增量数据处理模式 增量同步时，增量数据的处理模式。取值范围为 批量、逐条。agent设置 使用的Agent信息。取值范围如下：平台自动分配（默认）：由平台分配节点进行连接访问。用户手动指定：设置此参数为 用户手动指定 后，选择要使用的...
OSS违规检测
在 增量扫描结果 页面，查看最近7天的增量扫描结果和处理违规内容。如果扫描结果不符合您的业务需要，您可以对扫描结果进行自助审核，自助审核包含如下操作：违规并删除 通过单击 违规并删除，可将图片或视频从内容安全控制台和OSS Bucket...
迁移方案概览
本文将介绍数据迁移功能支持的数据库、版本和迁移类型，以及具体的配置文档。说明 数据迁移在某些场景下可实现部分数据同步的功能，但数据同步的网络稳定性更好、功能更丰富，推荐您使用数据同步功能。更多区别，请参见 数据迁移和数据同步...
支持的数据库
本文详细介绍DTS支持的数据库、迁移类型、同步初始化类型、同步拓扑和支持订阅的数据类型。说明 关于文中涉及的迁移类型、同步类型、订阅的数据类型等相关术语的详细解释，请参见 基本概念。当前仅当目标库为函数计算FC时，不支持跨地域的...
同步方案概览
本文将介绍数据同步功能支持的数据库、同步类型和同步拓扑。说明 数据同步在某些场景下可实现部分数据迁移的功能，且网络稳定性更好、功能更丰富。更多区别，请参见 数据迁移和数据同步的区别是什么？当前仅当目标库为函数计算FC时，不支持...
产品架构
如果需要在迁移期间保持源数据库的正常运行，当您在配置迁移任务时，必须将结构迁移、全量数据迁移和增量数据迁移都选为所需的迁移类型。结构迁移：在迁移数据之前，DTS需要在目标数据库中重新创建数据结构。对于异构数据库之间的迁移，DTS...
全量扫描和增量扫描
Flow 支持代码全量扫描和增量扫描，可以根据需要，选择合适的扫描方式进行使用。1）代码规约全量扫描，通过飞流的扫描任务对指定的代码工程进行编码规约全量检测。优点：支持跨文件引用，代码扫描全面。缺点：但扫描速度较慢，问题量会比较...
增量数据同步
通过选择已注册的数据源端数据和目标端，实现增量任务自动建表的方式创建离线同步周期任务，本文介绍如何创建MySQL to MaxCompute离线增量数据同步周期调度的任务。前提条件 已新建工作组“信息中心（xxzx）”，具体操作，请参见 新建工作...
RDS全量同步和增量同步
本文主要介绍RDS全量同步和增量同步的操作过程。注意事项 RDS全量同步和增量同步功能于2023年3月10日下线。2023年3月10日后购买的LTS将无法使用RDS全量同步和增量同步功能，2023年3月10日前购买的LTS仍可正常使用此功能。使用场景 RDS低...
将Oracle数据同步到表格存储
通过Tapdata Cloud的可视化界面，您可以将Oracle数据实时同步到表格存储（Tablestore）中。前提条件 使用Tapdata Cloud...取值范围如下：按事件类型处理：根据插入事件、更新事件和删除事件分别设置数据写入策略。追加写入：只处理插入事件，...
MySQL整库周期性增全量同步至Hive
如果您的 同步步骤 选择了 增量同步，在全增量控制面板页面，可以选择任务的类型为一次性增量还是周期性增量。说明 以下以一次性全量周期性增量为例，为您示例后续的配置要点。配置周期调度参数。如果您的任务涉及周期性同步，则可单击 ...
RDS增量数据同步至MaxCompute
本文以同步业务RDS数据库的数据至MaxCompute为例，为您介绍如何对不同场景的数据进行增量同步。背景信息 根据需要同步的数据在写入后是否发生变化，分为恒定的存量数据（通常是日志数据）和持续更新的数据（例如人员表中，人员的状态会发生...
- 产品推荐
- 这些文档可能帮助您