本文将介绍如何通过PolarDB-X 1.0的评估导入功能将数据从RDS迁移至PolarDB-X 1.0

问题

业务增长带来的数据量膨胀以及存储、并发、QPS的增长,都会导致RDS性能瓶颈的出现。此时迁移到PolarDB-X 1.0进行分库分表是一个很好的选择。但将数据从RDS迁移至PolarDB-X 1.0,您可能需要考虑如下问题:

  • PolarDB-X 1.0实例规格如何选取?
  • PolarDB-X 1.0下挂载的私有定制RDS规格如何选取?
  • RDS中的单表迁移到PolarDB-X 1.0后,如何拆分?如何选取分表数及拆分键?
  • 如何快速建库、建表?
  • 如何快速将数据从RDS导入到PolarDB-X 1.0

解决方案

PolarDB-X 1.0针对上述问题,提供了评估导入功能,帮助您轻松快速地从RDS迁移至PolarDB-X 1.0

表 1. 迁移流程
步骤说明
步骤一:获取评估建议

PolarDB-X 1.0的评估建议功能够:

  • 推荐迁移后的PolarDB-X 1.0实例规格以及PolarDB-X 1.0数据库下挂载的私有定制RDS实例规格。
  • 为源RDS的每一张表提供拆分方案,包括源库中各个表是否拆分、选取哪个字段为拆分键、源库中各个表导入到PolarDB-X 1.0时的建表语句等。
步骤二:数据导入

PolarDB-X 1.0的数据导入功能支持:

  • 通过评估建议开始导入:基于评估建议的结果,提供快速建库、建表、数据导入的一体化迁移方案。
    图 1. 任务执行流程
    流程
  • 自定义导入:您也可以按照自己的业务需求购买PolarDB-X 1.0私有定制RDS实例并建库建表,然后将数据从源RDS库导入到目标PolarDB-X 1.0库。
    图 2. 任务执行流程
    任务执行流程
步骤三:完成迁移PolarDB-X 1.0保证全量任务完成后,还会提供14天的增量同步服务。当全部数据导入完成后,您可以将业务从RDS切换到PolarDB-X 1.0

步骤一:获取评估建议

PolarDB-X 1.0能够对源RDS库信息进行评估并给出迁移到目标PolarDB-X 1.0的相关建议,所有建议将在评估报告中显示。

  1. 登录PolarDB分布式版控制台
  2. 在页面左上角选择目标实例所在地域。
  3. 在左侧导航栏中,单击评估导入 > 评估建议
  4. 评估建议页面右上角,单击开始 RDS 评估
    开始
  5. 源库信息页面,设置以下参数。
    配置说明
    任务名称输入迁移任务的名称。
    源库信息实例类型固定为RDS实例无需选择。
    RDS实例ID选择源RDS实例。
    数据库名选择源数据库。
    数据库端口输入源数据库端口。
    数据库账号输入源数据库账号。
    数据库密码输入源数据库账号的密码。
    说明 输入源数据库账号的密码后,您可以单击右侧的测试连接确认源RDS的连接是否正常。
    业务信息您可以根据实际业务设置预计数据规模增长百分比预计平均QPS增长百分比以获得更准确的评估建议。
    评估时长您可以设置评估时长为1小时、3小时、6小时、1天、3天或7天;您也可以选择自定义评估时长,自定义评估时长的范围为1~336小时(即14天)。
  6. 选中同意开启SQL洞察并单击下一步
  7. 任务预检页面,等待预检结果显示成功后,单击开始任务
  8. 评估任务完成后,您可以进行如下操作:
    评估完成
    • 您可以单击任务列表右侧的操作栏中的评估报告查看评估建议详情。报告
      说明 您可以在拆分推荐区域,单击展开查看拆分推荐详情,如拆分类型、拆分键等。您还可以单击导出建表SQL下载具体的建表SQL语句。
    • 您可以单击任务列表右侧的操作栏中的开始导入直接进入数据导入流程。

步骤二:数据导入

您可以通过如下两种方式将数据从源RDS导入PolarDB-X 1.0

  • 通过评估建议开始导入
    1. 登录PolarDB分布式版控制台
    2. 在页面左上角选择目标实例所在地域。
    3. 在左侧导航栏中,单击评估导入 > 评估建议
    4. 找到目标任务,单击右侧操作栏中的开始导入导入
    5. 评估概要页面,确认推荐实例的规格和个数,单击下一步
    6. 选中目标PolarDB-X 1.0实例并单击图标图标将其移动到右侧已选框中,单击下一步
      说明 仅支持选择1个PolarDB-X 1.0实例。
    7. 选中目标私有定制RDSRDS实例并单击图标图标将其移动到右侧已选框中,单击下一步
      说明 您可以继续使用已购的私有定制RDS实例,但建议购买新的私有定制RDS实例为目标PolarDB-X 1.0提供独立的存储资源。
    8. 任务预检页面,等待预检结果显示成功后,单击下一步
    9. 拓扑确认页面确认源RDS实例、源库和目标PolarDB-X 1.0实例信息,单击创建任务即可。
  • 自定义导入
    1. 登录PolarDB分布式版控制台
    2. 在页面左上角选择目标实例所在地域。
    3. 在左侧导航栏中,单击评估导入 > 数据导入
    4. 导入任务页面,单击右上角RDS 自定义导入
    5. 源库及目标库页面,设置如下参数后,单击下一步
      配置说明
      任务名称输入迁移任务的名称。
      源库信息实例类型固定为RDS实例无需选择。
      RDS实例ID选择源RDS实例。
      数据库名选择源数据库。
      数据库端口输入源数据库端口。
      数据库端账号输入源数据库账号。
      数据库密码输入源数据库账号的密码。
      说明 输入源数据库账号的密码后,您可以单击右侧的测试连接确认源RDS的连接是否正常。
      目标库信息数据库端口输入目标数据库端口。
      数据库端账号输入目标数据库账号。
      数据库密码输入目标数据库账号的密码。
      说明 输入目标数据库账号的密码后,您可以单击右侧的测试连接确认目标PolarDB-X 1.0的连接是否正常。
    6. 迁移列表页面左侧的源表名栏选中需要迁移源表,并在右侧目标表名选择对应的目标表,单击下一步
      重要 不支持对使用了联合主键的表进行迁移,否则任务预检时将会报错。
    7. 任务预检页面,等待预检结果显示成功后,单击开始任务即可。

步骤三:完成迁移

  1. 登录PolarDB分布式版控制台
  2. 在页面左上角选择目标实例所在地域。
  3. 在左侧导航栏中,单击评估导入 > 数据导入
  4. 找到目标任务,单击右侧操作栏中的结束任务
    结束任务
    说明
    • PolarDB-X 1.0保证全量任务完成后,还会提供14天的增量同步服务。您可以在任务进度显示为100%后,直接单击结束任务手动完成迁移。您也可以等待系统停止14天的增量同步服务后自动结束任务
    • 数据导入任务的任务状态会在结束任务后由运行中切换为已结束,此时您可以单击清理任务,任务被清理后将不会显示在导入任务列表。

常见问题

Q:开始导入数据前是否需要暂停源库的写入操作?

A:不需要,PolarDB-X 1.0保证全量任务完成后,还会提供14天的增量同步服务。您可以在任务进度显示为100%后,直接单击结束任务手动完成迁移。您也可以等待系统停止14天的增量同步服务后自动结束任务