AnalyticDB for MySQL 2.0数据导入

mysql -h host -P port -u username -p password -D dbname;

SHOW CATALOGS;

CREATE EXTERNAL CATALOG catalog_name
properties(
 'connector.name'='mysql'
 'connection-url'='jdbc:mysql://mapping_ip:mapping_port/database_name'
 'connection-user'='$user'
 'connection-password'='$password'
);

CREATE EXTERNAL CATALOG catalog_name
properties(
 'connector.name' = 'mysql'
 'connection-url' = 'jdbc:mysql://mapping_ip:mapping_port/database_name'
 'connection-user' = '$user'
 'connection-password' = '$password'
 'odps-access-id' = '$access_id'
 'odps-access-key' = '$access_key'
);

• 同步整个库。数据同步到数仓版外部数据目录定义中的数据库。

  data-sync database database_name to catalog_name [by pangu];

  参数	说明
  database_name	AnalyticDB for MySQL 2.0集群的数据库名称。
  catalog_name	数仓版外部数据目录的名称。
  by pangu	对于MaxCompute中已经没有原始数据的场景，从AnalyticDB for MySQL 2.0本地同步数据, 需要在命令最后指定by pangu。 说明 如果不指定by pangu，且在第二步未定义odps-access-id和odps-access-key参数，数据同步会报错。

• 同步单个表结构和数据。

  data-sync table table_name to catalog_name [by pangu];

  参数	说明
  table_name	AnalyticDB for MySQL 2.0集群的表名称。
  catalog_name	数仓版外部数据目录的名称。
  by pangu	对于MaxCompute中已经没有原始数据的场景，从AnalyticDB for MySQL 2.0本地同步数据, 需要在命令最后指定by pangu。 说明 如果不指定by pangu，且在第二步未定义odps-access-id和odps-access-key参数，数据同步会报错。

• 同步单个表的某个二级分区数据。

  data-sync table table_name to catalog_name on partition;

  参数	说明
  table_name	AnalyticDB for MySQL 2.0集群的表名称。
  catalog_name	数仓版外部数据目录的名称。
  partition	AnalyticDB for MySQL 2.0集群中表的二级分区名称。 例如AnalyticDB for MySQL 2.0集群中表的二级分区定义为PARTITION BY VALUE(202207)，partition填写202207即可。

• 按查询条件查询出单个表的部分数据同步到外部数据目录中。

  data-sync tabletable_name to catalog_name 
    options(mode=replace)
    where column_name < $value1 and column_name > $value2;

  参数	说明
  table_name	AnalyticDB for MySQL 2.0集群的表名称。
  catalog_name	数仓版外部数据目录的名称。
  mode=replace	指定数据写入方式，取值： replace：推荐值，数据写入时会覆盖表中原有的数据。 insert：默认值，当主键重复时会自动忽略当前写入数据，不做更新。 说明 写入方式为insert时，会出现FLOAT类型数据错误的问题。
  column_name	AnalyticDB for MySQL 2.0集群中表的列名。

• 同步整个库的元数据（Meta）。

  meta-sync database database_name to catalog_name;

  参数	说明
  database_name	AnalyticDB for MySQL 2.0集群的数据库名称。
  catalog_name	数仓版外部数据目录的名称。

• 同步单个表的元数据（Meta）。

  meta-sync table table_name to catalog_name;

  参数	说明
  table_name	AnalyticDB for MySQL 2.0集群的数据库名称。
  catalog_name	数仓版外部数据目录的名称。

• 查看所有任务进度。

  show data-sync;

• 查看执行成功的任务进度。

  show data-sync succeeded;

• 查看正在执行的任务进度。

  show data-sync running;

• 查看执行失败的任务进度。

  show data-sync failed;

• 查看单个表的任务进度。

  show data-sync table_name;