数据集成支持离线集成、实时集成、整库迁移集成方式。本文为您介绍离线集成、实时集成、整库迁移支持的数据源类型。
不同集成类型适用场景
|
集成类型 |
适用场景 |
|
离线集成 |
适用于数据上云、云上数据迁移到本地业务系统等场景。例如，将本地数据库MySQL的数据迁移至阿里云数据库RDS中。 |
|
整库迁移 |
适用于将本地数据中心或在ECS上自建的数据库，同步数据至离线数仓（Hive）、大数据计算服务等场景。例如，将ECS上自建的MySQL数据库的数据迁移至MaxCompute中。 |
|
实时集成 |
适用于将来源端数据源中整库或全部表的数据变化实时集成至目标端数据源中，实现来源端数据源与目标端数据源实时地保持数据同步。 |
离线集成支持的数据源
|
数据源 |
读取 |
写入 |
|
大数据存储型数据源 |
||
|
MaxCompute |
支持 |
支持 |
|
Hive |
支持 |
支持 |
|
Hologres |
支持 |
支持 |
|
Impala |
支持 |
支持 |
|
TDH Inceptor |
支持 |
支持 |
|
Kudu |
支持 |
支持 |
|
StarRocks |
支持 |
支持 |
|
Hudi |
支持 |
支持 |
|
Doris |
支持 |
支持 |
|
GreenPlum |
支持 |
支持 |
|
TDengine |
支持 |
不支持 |
|
ArgoDB |
支持 |
支持 |
|
SelectDB |
支持 |
支持 |
|
Databricks |
支持 |
支持 |
|
Amazon Redshift |
支持 |
支持 |
|
DolphinDB |
支持 |
支持 |
|
Snowflake |
支持 |
支持 |
|
Data Lake Formation |
支持 |
支持 |
|
文件数据源 |
||
|
HDFS |
支持 |
支持 |
|
FTP |
支持 |
支持 |
|
OSS |
支持 |
支持 |
|
Amazon S3 |
支持 |
支持 |
|
消息队列数据源 |
||
|
Log Service |
支持 |
不支持 |
|
Kafka |
支持 |
支持 |
|
DataHub |
支持 |
支持 |
|
关系型数据源 |
||
|
PolarDB |
支持 |
支持 |
|
PolarDB-X（原DRDS） |
支持 |
支持 |
|
MySQL |
支持 |
支持 |
|
SAP HANA |
支持 |
支持 |
|
Microsoft SQL Server |
支持 |
支持 |
|
PostgreSQL |
支持 |
支持 |
|
AnalyticDB for MySQL 2.0 |
支持 |
不支持 |
|
AnalyticDB for MySQL 3.0 |
支持 |
支持 |
|
AnalyticDB for PostgreSQL |
支持 |
支持 |
|
OceanBase |
支持 |
支持 |
|
Oracle |
支持 |
支持 |
|
Vertica |
支持 |
支持 |
|
IBM DB2 |
支持 |
支持 |
|
Teradata |
支持 |
支持 |
|
ClickHouse |
支持 |
支持 |
|
DM（达梦） |
支持 |
支持 |
|
GBase 8a |
支持 |
支持 |
|
KingbaseES |
支持 |
支持 |
|
TiDB |
支持 |
支持 |
|
GoldenDB |
支持 |
支持 |
|
OpenGauss |
支持 |
支持 |
|
GaussDB（DWS） |
支持 |
支持 |
|
Amazon RDS for PostgreSQL |
支持 |
支持 |
|
Amazon RDS for MySQL |
支持 |
支持 |
|
Amazon RDS for SQL Server |
支持 |
支持 |
|
Amazon RDS for Oracle |
支持 |
支持 |
|
Amazon RDS for DB2 |
支持 |
支持 |
|
TDSQL for MySQL |
支持 |
支持 |
|
PolarDB-X2.0 |
支持 |
支持 |
|
GBase 8c |
支持 |
支持 |
|
TDSQL for PostgreSQL |
支持 |
支持 |
|
OushuDB |
支持 |
支持 |
|
NoSQL数据源 |
||
|
HBase0.9.4 |
不支持 |
不支持 |
|
HBase1.1x |
支持 |
支持 |
|
HBase2.0 |
支持 |
支持 |
|
Elasticsearch |
支持 |
支持 |
|
MongoDB |
支持 |
支持 |
|
Tablestore |
支持 |
支持 |
|
Aliyun HBase |
不支持 |
不支持 |
|
Redis |
不支持 |
支持 |
|
Easysearch |
支持 |
支持 |
|
OpenSearch |
支持 |
支持 |
|
InfluxDB |
支持 |
支持 |
|
Lindorm |
支持 |
支持 |
|
半结构化存储数据源 |
||
|
API |
支持 |
支持 |
|
SAP Table |
支持 |
不支持 |
|
Salesforce |
支持 |
不支持 |
|
飞书多维表格 |
支持 |
支持 |
整库迁移支持的数据源
|
数据源类型 |
数据源 |
相关文档 |
|
来源端数据源 |
MySQL、Oracle、Microsoft SQL Server、OceanBase、IBM DB2、MaxCompute、FTP、TDengine、Hive、PostgreSQL、达梦（DM）、Amazon Redshift、Amazon RDS for PostgreSQL、Amazon RDS for MySQL、Amazon RDS for SQL Server、Amazon RDS for Oracle、Amazon RDS for DB2、TDSQL for MySQL、DolphinDB、PolarDB-X2.0、GBase 8c 。 |
|
|
目标端数据源 |
ArgoDB、TDH Inceptor、OushuDBHive、MaxCompute、AnalyticDB for PostgreSQL、StarRocks、SelectDB、Doris、GaussDB（DWS）、Lindorm、Databricks、Data Lake Formation。 |
实时集成支持的数据源
|
实时计算引擎 |
数据源 |
相关文档 |
|
|
Apache Flink（开源Flink） |
Flink on yarn |
|
|
|
Flink on K8s |
|
||
|
阿里云实时计算Flink（VVP） |
|
||