元数据迁移

创建迁移任务

1. 打开数据湖构建控制台。

2. 选择左侧菜单“元数据管理-元数据迁移”。

3. 单击创建迁移任务，开始配置元数据迁移任务。

源库配置

• 元数据库类型：目前仅支持MySQL类型。

• MySQL类型：

  • Aliyun RDS：阿里云官网提供的RDS，可参考云数据库RDS MySQL 版。

  • 其他MySQL：EMR内置MySQL、自建MySQL或其他MySQL数据库。

• 如果选择为Aliyun RDS，则需要填写RDS实例相关信息：

  • RDS实例。

  • 元数据库名称。

  • 用户名。

  • 密码。

  

• 如果选择为其他MySQL，则需要填写MySQL连接的相关信息：

  • JDBC URL。

  • 用户名。

  • 密码。

• 网络连接配置

  • 当MySQL类型=Aliyun RDS时，此时网络连接方式仅可选择“阿里云VPC”。当您选择VPC连接时，建议选择与RDS或MySQL匹配的VPC，vSwitch与安全组，避免网络出现问题。

  

  • 当MySQL类型=其他MySQL时，此时网络连接方式可选择“阿里云VPC”,“公网连接”两种方式。

  

迁移任务配置

• 任务名称：输入元数据迁移任务的名称。

• 任务描述（可选）：输入您的一些任务备注信息。

• 冲突解决策略：

  • 更新旧的元数据：旧数据不会被删除，在原有基础上更新元数据。

  • 重建元数据，即先删除旧的元数据后再新建：旧数据将会被全部删除，重新同步元数据并新建。

• 日志存放路径：所有任务日志将会存放的OSS位置。

• 同步对象：包括Database、Function、Table、Partition 四种对象，一般为全选。

• Location替换：适用于迁移过程中需要对table/database的location进行替换修改的情况。比如从传统HDFS架构，迁移到OSS存算分离架构，则需要将hdfs://路径，替换为oss://路径等情况。

保存任务

确认任务配置信息无误，单击确定按钮，创建任务完成。