使用数据传输服务(Data Transmission Service)(简称DTS)可以将副本集实例数据库数据迁移至分片集群实例数据库中。DTS支持全量数据迁移及增量数据迁移,使用增量数据迁移可以实现在本地应用不停服的情况下,平滑地完成MongoDB数据库的迁移操作。

前提条件

  • 源实例数据库版本需为3.2或3.4版本,暂不支持4.0版本。
  • 目标实例的存储空间应大于源实例的存储空间。

注意事项

  • 为避免影响您的正常业务使用,请在业务低峰期进行数据迁移。
  • 目标实例的数据库版本支持3.2、3.4和4.0版本。
  • 目标实例的存储引擎支持 WiredTiger、RocksDB 和 TerarkDB。
  • 不支持迁移admin数据库,即使被选择为迁移对象,该库中的数据也不会被迁移。

费用说明

迁移类型 链路配置费用 公网流量费用
全量数据迁移 不收取 不收取
增量数据迁移 收取,费用详情请参考数据传输服务DTS定价 不收取

迁移类型说明

  • 全量数据迁移:将源MongoDB实例数据库迁移对象的存量数据全部迁移到目标MongoDB实例数据库中。
    • 支持database迁移。
    • 支持collection迁移。
    • 支持index迁移。
  • 增量数据迁移:在全量迁移的基础上,将源MongoDB实例数据库的增量更新数据同步到目标MongoDB实例数据库中。
    • 支持database新建、删除操作的同步。
    • 支持document新增、删除、更新操作的同步。
    • 支持collection新建、删除操作的同步。
    • 支持index新建、删除操作的同步。

迁移权限要求

实例类型 全量数据迁移 增量数据迁移
源MongoDB实例 read权限
  • 待迁移库的read权限
  • admin的read权限
  • local的read权限
目标MongoDB实例 readWrite权限 readWrite权限

迁移前准备工作

根据业务需要设置数据分片,详情请参考设置数据分片以充分利用Shard性能
说明
  • 您可以根据源实例的数据库结构提前在目标MongoDB实例中,建立需要数据分片的数据库和集合,并配置数据分片。您也可以在数据迁移完成后配置数据分片。
  • 如您不需要设置数据分片,您可以跳过本步骤。

数据迁移操作步骤

  1. 登录DTS数据传输控制台
  2. 在左侧导航栏,单击数据迁移
  3. 单击数据迁移页面右侧的创建迁移任务
  4. 配置迁移任务的源库及目标库信息。
    配置迁移源库和目标库信息
    源库及目标库信息说明表
    任务名称
    • DTS为每个任务自动生成一个任务名称,任务名称没有唯一性要求。
    • 您可以根据需要修改任务名称,建议为任务配置具有业务意义的名称,便于后续的任务识别。
    源实例信息
    • 实例类型:选择云数据库MongoDB
    • 实例地区:选择源MongoDB实例所在地域。
    • MongoDB实例ID:选择源MongoDB实例的实例ID。
    • 数据库名称:填入源MongoDB实例中,用于账号验证的鉴权数据库名称,默认为admin。
    • 数据库账号:填入连接源MongoDB实例数据库的账号,权限要求请参见迁移账号权限要求
    • 数据库密码:填入连接源MongoDB实例数据库账号对应的密码。
    目标实例信息
    • 实例类型:选择MongoDB实例
    • 实例地区:选择目标MongoDB实例所在地域。
    • MongoDB实例ID:选择目标MongoDB实例的实例ID。
    • 数据库名称:填入目标MongoDB实例中,用于账号验证的鉴权数据库名称,默认为admin。
    • 数据库账号:填入连接目标MongoDB实例数据库的账号,权限要求请参见迁移账号权限要求
    • 数据库密码:填入连接目标MongoDB实例数据库账号对应的密码。
  5. 配置完成后,单击页面右下角的授权白名单并进入下一步
    说明 此步骤会将DTS服务器的IP地址自动添加到源MongoDB实例和目标MongoDB实例的白名单中,用于保障DTS服务器能够正常连接MongoDB实例。迁移完成后如不再需要可手动删除,详情请参考白名单设置
  6. 选择迁移对象迁移类型
    配置数据迁移对象和迁移类型
    配置选项 配置说明
    迁移类型
    • 如果只需要进行全量迁移,迁移类型选择全量数据迁移
      说明 为保障数据一致性,全量数据迁移期间请勿在源MongoDB数据库中写入新的数据。
    • 如果需要进行不停机迁移,迁移类型同时选择全量数据迁移增量数据迁移
    迁移对象
    • 迁移对象框中将想要迁移的数据库选中,单击移动到已选择对象框。
      说明 不支持迁移admin数据库,即使被选择为迁移对象,该库中的数据也不会被迁移。
    • 迁移对象选择的粒度可以为:库、collection/function 两个粒度。
    • 默认情况下,对象迁移到MongoDB实例后,对象名跟本地MongoDB数据库一致。
      说明 如果您迁移的对象在源数据库跟目标实例上名称不同,那么需要使用DTS提供的对象名映射功能,使用方法请参考库表列映射
  7. 上述配置完成后,单击页面右下角的预检查并启动
    说明
    • 在迁移任务正式启动之前,会先进行预检查。只有预检查通过后,才能成功启动迁移任务。
    • 如果预检查失败,单击具体检查项后的提示信息,查看具体的失败详情。根据失败原因修复后,重新进行预检查。
  8. 预检查通过后,单击下一步
  9. 购买配置确认页面,选择链路规格并勾选数据传输(按量付费)服务条款
  10. 单击购买并启动,迁移任务正式开始。
    • 全量数据迁移

      等待迁移任务完成即可,迁移任务会自动停止。

    • 增量数据迁移

      迁移任务不会自动结束,观察迁移任务的状态显示为增量迁移无延迟的状态时,将源库停写几分钟,等待增量迁移再次进入增量迁移无延迟状态,手动停止迁移任务。


      增量迁移无延迟

根据业务需求选择合适的时间,将业务切换至目标MongoDB实例中。

更多信息

分片集群实例连接说明