从PolarDB MySQL版同步到Kafka
注意事项 如果源数据库没有主键或唯一约束，且所有字段没有唯一性，可能会导致目标数据库中出现重复数据。费用说明 同步类型 链路配置费用 库表结构同步和全量数据同步 不收费。增量数据同步 收费，详情请参见 计费概述。功能限制 仅支持表...
源库连接性检查
源数据库对来源IP进行了限制 检测方法 使用命令行或客户端连接源数据库，如果连接正常，说明源数据库可能限制了DTS服务器IP地址。如果源数据库为自建MySQL，可以使用客户端连接源数据库后执行下述命令进行检查。SELECT HOST FROM mysql....
Dataphin支持的数据源
在使用Dataphin前，您需要选择符合业务场景需求的数据库或数据仓库作为数据源，用于读取原始数据和写入数据建设过程中的数据。Dataphin集成了丰富的数据引擎，支持接入MaxCompute等数据仓库，也支持对接企业传统数据库，如MySQL、Oracle等...
添加兼容MySQL数据库的数据源
本文档介绍在DataV中添加兼容MySQL数据库数据源的方法，以及相关参数配置说明。通过兼容MySQL数据库的数据源，您可以使用旧版本的MySQL数据库作为组件的数据源。前提条件 已准备好待添加的兼容MySQL数据库数据源。操作步骤 登录 DataV控制...
创建GoldenDB数据源
通过创建GoldenDB数据源能够实现Dataphin读取GoldenDB的业务数据或向GoldenDB写入数据。本文为您介绍如何创建GoldenDB数据源。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块...测试成功后，单击 确定，完成Golden DB数据源的创建。
创建GoldenDB数据源
通过创建GoldenDB数据源能够实现Dataphin读取GoldenDB的业务数据或向GoldenDB写入数据。本文为您介绍如何创建GoldenDB数据源。使用限制 Dataphin仅支持超级管理员、数据源管理员、板块...测试成功后，单击 确定，完成Golden DB数据源的创建。
Dataphin支持的数据源
在使用Dataphin前，您需要选择符合业务场景需求的数据库或数据仓库作为数据源，用于读取原始数据和写入数据建设过程中的数据。Dataphin集成了丰富的数据引擎，支持接入MaxCompute、Hive等数据仓库，也支持对接企业传统数据库，如MySQL、...
数据源管理概述
功能介绍 多数据源类型接入：Dataphin内置丰富的数据源类型，支持对接的数据源包括大数据存储型数据源、文件型数据源、消息队列型数据源、关系型数据源和NoSQL数据源。更多信息，请参见 Dataphin支持的数据源。自定义数据源类型：在内置的...
数据库克隆
数据管理DMS的数据库克隆功能支持将源数据库的表结构和表数据复制至目标数据库中，实现全部表或部分表备份，适用多环境数据库初始化，例如将开发环境复制到测试环境。前提条件 源数据库与目标数据库类型相同，且都为MySQL。数据库实例的...
数据源管理概述
功能介绍 多数据源类型接入：Dataphin内置丰富的数据源类型，支持对接的数据源包括大数据存储型数据源、文件型数据源、消息队列型数据源、关系型数据源和NoSQL数据源。更多信息，请参见 Dataphin支持的数据源。自定义数据源类型：在内置的...
添加兼容MySQL数据库的数据源
本文档介绍在DataV中添加兼容MySQL数据库数据源的方法，以及相关参数配置说明。通过兼容MySQL数据库的数据源，您可以使用旧版本的MySQL数据库作为组件的数据源。前提条件 已准备好待添加的兼容MySQL数据库数据源。操作步骤 登录 DataV控制...
数据库评估概览
ADAM的数据库评估功能通过对源数据库快速分析、评估，获得目标库选型建议，并对迁移工作量和成本进行预估。数据库评估流程 操作步骤 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 集成与开发（DTS）>异构数据库迁移（ADAM）>数据库评估。...
数据库画像
数据库画像是数据库评估的基础数据，可以帮助您更好地了解自己的源数据库，在数据库迁移、改造等阶段，可以快速查找源数据库信息，指导迁移与改造。新建画像 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 集成与开发（DTS）>异构数据库迁移...
产品架构
如果需要在迁移期间保持源数据库的正常运行，当您在配置迁移任务时，必须将结构迁移、全量数据迁移和增量数据迁移都选为所需的迁移类型。结构迁移：在迁移数据之前，DTS需要在目标数据库中重新创建数据结构。对于异构数据库之间的迁移，DTS...
源库Binlog检查
在启动MySQL之间的增量数据迁移任务时，DTS将在预检查阶段对源数据库进行Binlog检查。本文将介绍源库Binlog检查涉及的检查项及修复方法。源库Binlog是否开启检查 该检查项主要检查源数据库是否开启Binlog功能。如果检查失败，请参考下述...
数据源管理常见问题
创建完成后，在画布编辑器内添加一个组件，在组件右侧 数据 面板中的 设置数据源 模块，单击 数据源类型，选择已经配置好的数据库数据源。说明 如果无法使用外网或不想使用外网访问时，可以按如下步骤操作：在DataV控制台，选择 我的数据>...
数据清理
背景信息 ODC 支持在源数据库中的数据归档到目标数据库后，删除源数据库中的数据，以提高数据库查询性能，降低在线存储成本。本文档旨在介绍如何通过提交数据清理工单实现归档数据。原理介绍 前提条件 清理的表中必须包含主键。注意事项 ...
数据源管理常见问题
创建完成后，在画布编辑器内添加一个组件，在组件右侧 数据 面板中的 设置数据源 模块，单击 数据源类型，选择已经配置好的数据库数据源。说明 如果无法使用外网或不想使用外网访问时，可以按如下步骤操作：在DataV控制台，选择 我的数据>...
修改备份源
源数据库的库表发生变动，例如新增、删除或修改了数据库对象，需要重新配置备份对象。前提条件 已创建备份计划，且 备份方式 为逻辑备份。备份源实例必须已创建数据库账号，该账号需要具备数据备份和恢复的权限。更多信息，请参见 账号权限...
数据归档
背景信息 ODC 支持定时将源数据库中的表数据归档至其它目标数据库中，以解决因线上数据增多影响查询性能与业务运作的问题。本文档旨在介绍如何通过提交数据归档工单实现归档数据。原理介绍 前提条件 归档的表中必须包含主键。注意事项 前置...
ADAM概览
异构数据库迁移ADAM（Advanced Database&Application Migration）提供数据库平滑迁云解决方案，全面评估上云可行性、成本和云存储选型，内置实施协助、数据迁移、应用迁移等工具，覆盖数据库迁移的全生命周期，帮助企业降低数据库和应用...
复制数据库SQL Server 2012及以上版本
您可以使用SQL命令复制数据库，您只需要使用存储过程sp_rds_copy_database指定源数据库和目的数据库即可。复制时间与数据库大小有关。说明 关于如何复制SQL Server 2008 R2版本实例的数据库，请参见 复制数据库SQL Server 2008 R2版。前提...
基本概念
结构迁移 在结构迁移阶段，DTS将待迁移对象的结构定义从源数据库迁移到目标数据库，例如表、视图、触发器和存储过程。对于异构数据库之间的结构迁移，DTS会将源库的结构定义转换为目标库支持的结构定义，例如将Oracle数据库中的NUMBER数据...
Redis备份上云
ECS上的自建数据库：备份ECS上的数据库，您还需配置源数据库实例所在的ECS实例ID与数据库端口。实例地区 选择源数据库实例的地域。数据库类型 默认为 Redis 选项。ECS实例ID 请选择ECS实例ID。端口 选择源数据库实例的连接端口。默认为 ...
数据库采集
采集方式介绍 在线采集：将源数据库的网络打通，并在源数据库白名单中添加ADAM服务器，确保ADAM服务器可以直接通过在线采集方式进行信息收集。更多信息，请参见 在线采集。有公网IP：源数据库具有公网IP，可以通过外网访问。无公网IP：通过...
Reserve参数说明
源数据库参数配置 请根据源数据库类型，在Reserve中配置参数。表 4.源数据库类型为MySQL（包括RDS MySQL和自建MySQL）参数 配置条件 说明 privilegeMigration 当源和目标数据库类型均为RDS MySQL时。是否迁移账号，取值为：true：迁移账号...
Redis逻辑备份
有公网IP:Port的自建数据库：可通过公网IP备份自建数据库，您还需配置源数据库实例的 连接地址 与 端口。通过专线/VPN网关/智能网关接入的自建数据库：可通过专有网络备份自建数据库，您需提前为数据库实例配置专有网络，并在此配置步骤...
使用DBLink跨库查询数据
说明 PolarDB PostgreSQL版（兼容Oracle）的DBLink目前支持如下两种连接方式：源数据库为 PolarDB PostgreSQL版（兼容Oracle）集群；目标数据库为 PolarDB PostgreSQL版（兼容Oracle）集群。源数据库为 PolarDB PostgreSQL版（兼容Oracle）...
数据库评估分析
评估详情 对象兼容度 Schema兼容性 面板列出所有对象的兼容性评估结果，对象类型涉及源数据库的所有对象，包括兼容，不兼容两种情况。单击对象兼容度 操作 列下的 详情，在 Schema兼容性 面板查看对象兼容或不兼容的数量、不兼容规则的详细...
使用ClickHouse-Local迁移上云
安装ClickHouse-Local 您需要一个托管ClickHouse-Local的主机机器（例如ECS服务器或本地服务器），该主机机器可以访问您当前的源数据库系统和云数据库ClickHouse企业版目标服务。下载ClickHouse-Local。curl https://clickhouse.com/ |sh ...
迁移数据库账号
grant SELECT on mysql.db to user@'%';grant SELECT on mysql.columns_priv to user@'%';grant SELECT on mysql.tables_priv to user@'%';目标库 grant SELECT on mysql.user to user@'%';grant CREATE USER on*.*to user@'%';grant GRANT...
自建数据库异地备份
端口 选择源数据库实例的连接端口，MySQL默认端口为3306。数据库账号 填入数据库账号，该账号需要具备一定的权限用于备份数据库，更多信息，请参见 账号权限说明。密码 填入该数据库账号对应的密码。账号密码填写完毕后，您可以单击密码...
智能压测
前提条件 源数据库支持：RDS MySQL PolarDB MySQL版 说明 不支持 PolarDB MySQL版 的 企业版 单节点 实例。PolarDB-X 2.0。目标数据库实例为：RDS MySQL。PolarDB MySQL版。PolarDB-X 2.0。源数据库实例与目标数据库实例均已接入DAS，详情...
SQL Server迁移上云指南
本文为您介绍SQL Server常见的几种迁移上云的方案，您可以根据数据源的位置、各方案使用的工具、各方案的优势与限制等，选择最适合您的上云方案。上云方案简介 上云方案 实现流程 操作步骤 物理备份上云 使用OSS（手动上云）将数据库日志...
数据归档至RDS MySQL
前提条件 支持如下类型的源数据库：MySQL类型：RDS MySQL、PolarDB MySQL版、AnalyticDB MySQL 3.0。PostgreSQL类型：RDS PostgreSQL、PolarDB PostgreSQL版。PolarDB分布式版。说明 物理库和逻辑库均支持。物理库：具体的某个数据库。逻辑...
同数据库归档
源数据库 是 搜索并选择数据库。归档配置 是 表名：选择需要归档数据的表。过滤条件（可选）：输入归档数据的过滤条件。例如，gmt_modified${6_month_ago}'。说明 如果您需要使用时间变量，例如，归档6个月前的数据，可以先进行 变量配置。...
数据归档至PolarDB MySQL版
前提条件 源数据库为：MySQL类型：RDS MySQL、PolarDB MySQL版、AnalyticDB MySQL 3.0。PostgreSQL类型：RDS PostgreSQL、PolarDB PostgreSQL版。PolarDB分布式版。说明 物理库和逻辑库均支持。物理库：具体的某个数据库。逻辑库：由单个或...
数据归档至AnalyticDB MySQL 3.0
前提条件 支持如下类型的源数据库：MySQL类型：RDS MySQL、PolarDB MySQL版、AnalyticDB MySQL 3.0。PostgreSQL类型：RDS PostgreSQL、PolarDB PostgreSQL版。PolarDB分布式版。说明 物理库和逻辑库均支持。物理库：具体的某个数据库。逻辑...
配置订阅任务（新控制台）
如果源数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需手动在ECS上的自建数据库中添加对应地区DTS服务的IP地址，以允许来自DTS服务器的访问；如果源数据库是IDC自建数据库或其他云数据库，则...
数据归档至Lindorm
前提条件 支持如下类型的源数据库：MySQL类型：RDS MySQL、PolarDB MySQL版、AnalyticDB MySQL 3.0。PostgreSQL类型：RDS PostgreSQL、PolarDB PostgreSQL版。PolarDB分布式版。说明 物理库和逻辑库均支持。物理库：具体的某个数据库。逻辑...
- 产品推荐
- 这些文档可能帮助您