全部产品
存储与CDN 数据库 安全 应用服务 数加·人工智能 数加·大数据基础服务 互联网中间件 视频服务 开发者工具 解决方案 物联网
数据传输服务DTS

通过专线接入阿里云的本地自建数据库的上云迁移

更新时间:2017-08-21 09:30:47

数据传输服务DTS支持通过专线接入阿里云的本地自建数据库的上云迁移。本小节以本地MySQL到RDS For MySQL实例的迁移为例,介绍如何通过DTS进行通过专线接入阿里云的本地自建数据库上云迁移任务的配置。

迁移前置条件

在迁移任务配置之前,需要在本地专线客户侧的接入设备上,添加指向DTS云端访问地址段的静态路由。

目前各个地域支持专线DB迁移的DTS IP段地址如下:

地域 DTS IP地址段
杭州 100.104.52.0/24
北京 100.104.183.0/24
青岛 100.104.72.0/24
上海 100.104.205.0/24
深圳 100.104.205.0/24
上海金融云 100.104.175.0/24
深圳金融云 100.104.72.0/24
美西 100.104.175.0/24
香港 100.104.233.0/24

迁移任务配置

下面详细介绍使用DTS将本地的MySQL迁移到RDS for MySQL的任务配置流程。

RDS实例数据库创建

在数据迁移过程中,如果待迁移的数据库在目标RDS实例中不存在,那么DTS自动会创建。但是对于如下两种情况,用户需要在配置迁移任务之前,手动创建数据库。

  1. 数据库名称不符合:RDS定义规范(由小写字母、数字、下划线、中划线组成,字母开头,字母或数字结尾,最长64个字符)。
  2. 待迁移数据库,在Oracle跟目标RDS实例中名称不同。

对于这两种情况,用户需要在配置迁移任务之前,先在RDS控制台完成数据库创建。具体参考RDS数据库创建流程RDS使用手册

迁移帐号创建

迁移任务配置,需要提供本地MySQL数据库及目标RDS实例的迁移账号。迁移账号所需权限详见上文的 迁移权限要求。

如果源MySQL实例迁移账号尚未创建,那么您可以参考 Grant语法说明,创建满足权限要求的迁移账号。

如果目标RDS实例迁移账号创建,那么您可以参考 RDS账号创建流程,创建对待迁移数据库有读写权限的迁移账号。

其他准备工作

如果需要进行增量迁移,那么需要确认源库的binlog是否开启,格式是否满足要求。具体确认项如下。

  1. 确认源库的binlog是否开启。

    确认源库开启binlog

    如果这里面查询出来的log_bin=OFF,那么说明源库没有开启binlog,这个时候如果需要使用增量迁移的话,需要修改本地MySQL的binlog配置,打开binlog日志。

    1. 开启二进制日志,修改log_bin=mysql_bin。
    2. 设置binlog模式为row,修改binlog_format=row。
    3. 配置server_id大于1,即server_id=某一个大于1的整数。
    4. 如果版本为5.6,修改binlog_row_image=full。
    5. 修改完成后,重启MySQL进程。
  2. 确认源库的binlog格式为row模式。

    确认源库开启binlog

    使用上面的命令确认本地MySQL的binlog格式是否为row,如果查询出来的结果不为ROW的话,那么通过如下的参数设置命令将模式修改为row。

    确认源库开启binlog

    当修改完成后,最好将已有的老连接KILL掉重连,否则可能出现其他的连接依然使用statement格式记录binlog日志。

  3. 当本地MySQL版本大等于5.6.2时,确认源库的binlog_row_image=full。

    确认源库开启binlog

    如果查询出来的结果不为FULL的话,那么通过如下的参数设置命令将其修改为full。

    确认源库开启binlog

迁移任务配置

当数据库、迁移账号都创建完成后,就可以开始配置迁移任务了。下面详细介绍下具体的配置步骤。

  1. 进入数据传输DTS控制台,单击右上角的创建迁移任务,开始任务配置
  2. 本地MySQL及目标RDS实例连接信息配置

    在这个步骤中,主要配置迁移任务名称,迁移源实例及目标实例连接信息。其中:

    • 任务名称

      默认情况下,DTS为每个任务自动生成一个任务名称。任务名称没有唯一性要求,您可以修改这个名称,为任务配置一个具有业务意义的名称,便于后续的任务识别。

    • 源实例连接信息

      • 实例类型:选择 通过专线接入阿里云的本地DB
      • 实例地区:选择 专线 接入阿里云的接入点,例如接入阿里云的北京,那么选择华北2即可。
      • 对端专有网络:专线 接入阿里云的VPC ID
      • 数据库类型:选择 MySQL
      • 主机名或IP地址:配置本地MySQL数据库访问地址,这个地址为本地局域网访问地址
      • 端口:MySQL实例监听端口
      • 数据库账号:MySQL实例访问账号
      • 数据库密码:上面MySQL访问账号对应的密码
    • 目标RDS实例连接信息。

      • 实例类型:选择 RDS实例
      • RDS实例ID: 配置迁移的目标RDS实例的实例ID。 DTS支持经典网络、VPC网络的RDS实例
      • 数据库账号:RDS实例的连接账号
      • 数据库密码:上面数据库账号对应的数据库密码

      专线接入配置方式

  3. 迁移对象及迁移类型配置

    • 迁移类型

      DTS支持 结构迁移、全量数据迁移、增量数据迁移。

      如果需要进行不停机迁移,那么需要选择:结构迁移+全量数据迁移+增量数据迁移。

      如果只进行全量迁移,那么需要选择:结构迁移+全量数据迁移。

    • 迁移对象

      迁移对象,需要选择您要迁移的对象。迁移对象选择的粒度可以为:库、表、列三个粒度。

      默认情况下,对象迁移到RDS实例后,对象名跟本地MySQL实例一致。如果您迁移的对象在源实例跟目标实例上名称不同,那么需要使用DTS提供的对象名映射功能,详细使用方式可以参考库表列映射

      当配置完迁移对象及迁移类型后,即进入任务启动前的预检查步骤

  4. 预检查

    在迁移任务正式启动之前,会先进行前置预检查,只有预检查通过后,才能成功启动迁移。

    如果预检查失败,那么可以点击具体检查项后的按钮,查看具体的失败详情,并根据失败原因修复后,重新进行预检查。

    预检查失败

  5. 启动迁移任务

    当预检查通过后,我们可以启动迁移任务,任务启动后,可以到任务列表中查看任务具体的迁移状态及进度。

    增量数据迁移是个动态同步的过程,所以建议在增量迁移达到无延迟状态时,在目标数据库上进行业务验证,如果验证成功,那么可以停掉迁移任务,然后将业务切换到目标数据库。

    至此,完成将本地MySQL数据库到RDS For MySQL的数据迁移任务配置。

本文导读目录