数据传输服务DTS（Data Transmission Service）支持将SQL Server（包括RDS SQL Server、自建SQL Server）迁移至云原生数据仓库AnalyticDB MySQL版 3.0，帮助您轻松实现数据的传输，用于实时数据分析。
支持的源数据库
SQL Server迁移至云原生数据仓库AnalyticDB MySQL版 3.0支持以下源数据库。本文以RDS SQL Server实例为源数据库介绍配置流程，其他数据源配置流程与本案例类似。- RDS SQL Server实例。
- 以下类型的自建数据库：
- 有公网IP的自建数据库。
- ECS上的自建数据库。
- 通过专线、VPN网关或智能网关接入的自建数据库。
- 通过数据库网关接入的自建数据库。
前提条件
- 该迁移任务仅支持在新版控制台配置。
- 已创建源RDS SQL Server实例，支持的版本，请参见迁移方案概览。创建方式，请参见创建RDS SQL Server实例。
注意 如RDS SQL Server的版本为2008、2008R2，则不支持增量迁移。
- 已创建目标云原生数据仓库AnalyticDB MySQL版 3.0集群，请参见创建集群。
- 目标云原生数据仓库AnalyticDB MySQL版 3.0集群的存储空间须大于源RDS SQL Server实例的存储空间。
- 若源端存在如下情况，建议使用RDS SQL Server数据库的备份功能进行迁移，详情请参见从自建数据库迁移至RDS。
- 数据库超过10个。
- 单个数据库执行日志备份操作的频率超过1次/小时。
- 单个数据库执行DDL操作的频率超过100条/小时。
- 单个数据库的日志量超过20 MB/s。
- 需要开启CDC（Change Data Capture，变更数据捕获）的表超过1000个。
- 源库日志存在堆表、无主键表、压缩表、含计算列表等场景。可以执行如下SQL检查源库是否存在这些场景的表：
- 检查源库堆表信息：
SELECT s.name AS schema_name, t.name AS table_name FROM sys.schemas s INNER JOIN sys.tables t ON s.schema_id = t.schema_id AND t.type = 'U' AND s.name NOT IN ('cdc', 'sys') AND t.name NOT IN ('systranschemas') AND t.object_id IN (SELECT object_id FROM sys.indexes WHERE index_id = 0); - 检查无主键表信息：
SELECT s.name AS schema_name, t.name AS table_name FROM sys.schemas s INNER JOIN sys.tables t ON s.schema_id = t.schema_id AND t.type = 'U' AND s.name NOT IN ('cdc', 'sys') AND t.name NOT IN ('systranschemas') AND t.object_id NOT IN (SELECT parent_object_id FROM sys.objects WHERE type = 'PK'); - 检查源库聚集索引列包含的主键列信息：
SELECT s.name AS schema_name, t.name AS table_name FROM sys.schemas s INNER JOIN sys.tables t ON s.schema_id= t.schema_id WHERE t.type= 'U' AND s.name NOT IN('cdc', 'sys') AND t.name NOT IN('systranschemas') AND t.object_id IN (SELECT pk_columns.object_id AS object_id FROM (select sic.object_id object_id, sic.column_id FROM sys.index_columns sic, sys.indexes sis WHERE sic.object_id= sis.object_id AND sic.index_id= sis.index_id AND sis.is_primary_key= 'true') pk_columns LEFT JOIN (SELECT sic.object_id object_id, sic.column_id FROM sys.index_columns sic, sys.indexes sis WHERE sic.object_id= sis.object_id AND sic.index_id= sis.index_id AND sis.index_id= 1) cluster_colums ON pk_columns.object_id= cluster_colums.object_id WHERE pk_columns.column_id != cluster_colums.column_id); - 检查源库压缩表信息：
SELECT s.name AS schema_name, t.name AS table_name FROM sys.objects t, sys.schemas s, sys.partitions p WHERE s.schema_id = t.schema_id AND t.type = 'U' AND s.name NOT IN ('cdc', 'sys') AND t.name NOT IN ('systranschemas') AND t.object_id = p.object_id AND p.data_compression != 0; - 检查包含计算列表信息：
SELECT s.name AS schema_name, t.name AS table_name FROM sys.schemas s INNER JOIN sys.tables t ON s.schema_id = t.schema_id AND t.type = 'U' AND s.name NOT IN ('cdc', 'sys') AND t.name NOT IN ('systranschemas') AND t.object_id IN (SELECT object_id FROM sys.columns WHERE is_computed = 1);
- 检查源库堆表信息：
注意事项
| 类型 | 说明 |
|---|---|
| 源库限制 |
|
| 其他限制 |
|
费用说明
| 迁移类型 | 链路配置费用 | 公网流量费用 |
|---|---|---|
| 结构迁移和全量数据迁移 | 不收费。 | 通过公网将数据迁移出阿里云时将收费，详情请参见计费概述。 |
| 增量数据迁移 | 收费，详情请参见计费概述。 |
迁移类型说明
- 库表结构迁移
DTS将源库中迁移对象的结构定义迁移到目标库。
- 支持迁移的结构对象有Schema、Table、View、Function和Procedure。
- 不支持迁移的结构对象有：assemblies、service broker、全文索引、全文目录、分布式schema、分布式函数、CLR存储过程、CLR标量函数、CLR表值函数、内部表、系统、聚合函数。
警告 由于此场景属于异构数据库间的数据迁移，数据类型无法一一对应，请谨慎评估数据类型的映射关系对业务的影响，详情请参见异构数据库间的数据类型映射关系。 - 全量迁移
DTS将源库中迁移对象的存量数据，全部迁移到目标库中。
- 增量迁移
DTS在全量迁移的基础上，将源库的增量更新数据迁移到目标库中。通过增量数据迁移可以实现在自建应用不停机的情况下，平滑地完成数据迁移。
支持增量迁移的SQL操作
| 操作类型 | SQL操作语句 |
|---|---|
| DML | INSERT、UPDATE、DELETE
说明 不支持增量迁移仅更新大字段的UPDATE语句。
|
| DDL |
说明 不支持迁移事务性的DDL操作。
|
数据库账号的权限要求
| 数据库 | 结构迁移 | 全量迁移 | 增量迁移 |
|---|---|---|---|
| RDS SQL Server实例 | 待迁移对象的读权限 | 待迁移对象的读权限 | 待迁移对象的所有者权限
说明 高权限账号满足要求。
|
| 云原生数据仓库AnalyticDB MySQL版 3.0集群 | 读写权限 | ||
数据库账号创建及授权方法：
操作步骤
- 配置任务对象及高级配置。
- 基础配置
配置 说明 任务步骤 - 如果只需要进行全量迁移，请同时选中库表结构迁移和全量迁移。
- 如果需要进行不停机迁移，请同时选中库表结构迁移、全量迁移和增量迁移。
说明- 如果选择全量迁移 ，则执行了CREATE TABLE语句的待同步表（表结构和表数据）支持迁移至目标库。
- 如果未选择增量迁移，为保障数据一致性，数据迁移期间请勿在源实例中写入新的数据。
目标已存在表的处理模式 -
预检查并报错拦截：检查目标数据库中是否有同名的表。如果目标数据库中没有同名的表，则通过该检查项目；如果目标数据库中有同名的表，则在预检查阶段提示错误，数据迁移任务不会被启动。
说明 如果目标库中同名的表不方便删除或重命名，您可以更改该表在目标库中的名称，请参见库表列名映射。 - 忽略报错并继续执行：跳过目标数据库中是否有同名表的检查项。
警告 选择为忽略报错并继续执行，可能导致数据不一致，给业务带来风险，例如：
- 表结构一致的情况下，在目标库遇到与源库主键的值相同的记录，则会保留目标库中的该条记录，即源库中的该条记录不会迁移至目标库中。
- 表结构不一致的情况下，可能导致只能迁移部分列的数据或迁移失败。
SQLServer增量同步模式 - 非堆表用日志解析增量同步，堆表用CDC增量同步：
- 优点：
- 支持源库堆表、无主键表、压缩表、含计算列表等场景。
- 链路稳定性较高。能拿到完整的DDL语句，DDL场景支持丰富。
- 缺点：
DTS会在源库中创建触发器dts_cdc_sync_ddl、心跳表dts_sync_progress、DDL存储表dts_cdc_ddl_history以及会开启库级别CDC和部分表CDC。
- 优点：
- 解析源库日志做增量同步：
- 优点：
对源库无侵入。
- 缺点：
不支持源库堆表、无主键表、压缩表、含计算列表等场景。
- 优点：
实例级别选择所需同步的DDL和DML 按实例级别选择增量迁移的SQL操作，支持的操作，请参见支持增量迁移的SQL操作。 说明 如需按库或表级别选择增量迁移的SQL操作，请在已选择对象中右击迁移对象，在弹跳框中选中所需增量迁移的SQL操作。同步对象 在同步对象框中单击待迁移的对象，然后单击
将其移动到已选择对象框。
说明 本场景为异构数据库间迁移，因此迁移对象选择的粒度为表，且其他对象（如视图、触发器、存储过程）不会被迁移至目标库。映射名称更改 过滤待迁移数据 支持设置条件过滤数据，详情请参见通过SQL条件过滤任务数据。
增量迁移的SQL操作 选择增量迁移DDL和DML操作，请右击已选择对象中的迁移对象，在弹跳框中选择所需增量迁移的DDL和DML操作。支持的操作，请参见支持增量迁移的SQL操作。 - 高级配置
配置 说明 设置告警 是否设置告警，当迁移失败或延迟超过阈值后，将通知告警联系人。- 不设置：不设置告警。
- 设置：设置告警，您还需要设置告警阈值和告警联系人。
源、目标库无法连接重试时间 默认重试720分钟，您也可以在取值范围（10~720分钟）内自定义重试时间，建议设置30分钟以上。如果DTS在设置的时间内重新连接上源、目标库，同步任务将自动恢复。否则，同步任务将失败。说明- 针对同源或者同目标的多个DTS实例，网络重试时间以后创建任务的设置为准。
- 由于连接重试期间，DTS将收取任务运行费用，建议您根据业务需要自定义重试时间，或者在源和目标库实例释放后尽快释放DTS实例。
配置ETL功能 选择是否配置ETL功能。关于ETL的更多信息，请参见什么是ETL。- 是：配置ETL功能，并在文本框中填写数据处理语句，详情请参见在DTS迁移或同步任务中配置ETL。
- 否：不配置ETL功能。
- 基础配置
- 设置待迁移的表在目标云原生数据仓库AnalyticDB MySQL版中主键列和分布键信息。
说明- 若任务步骤选择了库表结构迁移，您需要定义待迁移的表在云原生数据仓库AnalyticDB MySQL版 3.0中的类型、主键列、分布键等信息，详情请参见CREATE TABLE。
- 若任务步骤选择了全量同步，则主键列和分布键有如下两种默认情况：
- 源库中待同步的表有主键（包含主键为单列和多列），则以该主键列为分布键。
- 源库中待同步的表无主键，则自动生成一个自增主键列，可能会导致源库和目标库数据不一致。
- 上述配置完成后，单击页面右下角的下一步保存任务并预检查。 说明
- 在迁移任务正式启动之前，会先进行预检查。只有预检查通过后，才能成功启动迁移任务。
- 如果预检查失败，单击具体检查项后的
，查看失败详情。
- 您可以根据提示修复后重新进行预检查。
- 如无需修复告警检测项，您也可以选择确认屏蔽、忽略告警项并重新进行预检查，跳过告警检测项重新进行预检查。
设置方式，请参见