实时集成

更新时间:2025-03-05 06:58:53

Dataphin支持实时集成功能,可将来源端数据源中整库或全部表的数据变化实时集成至目标端数据源中,实现来源端数据源与目标端数据源实时的保持数据同步。

功能概述

image

多数据源实时集成同步:实时集成支持多种来源端数据源汇聚组合至目标端数据源,形成实时同步链路进行数据同步。

数据源圈选:实时集成支持整库、部分表、排除表圈选方式,实时增量同步至目标端数据源。

  • 整库:实时进行整库数据同步。

  • 圈选表:圈选来源端数据源中部分表进行实时同步,未圈选表不会进行数据同步。

  • 排除表:圈选的排除表外的表进行实时同步,圈选的表不会进行数据同步。

实时集成支持的数据源

阿里云实时计算引擎FLINK(VVP)

来源端数据源

目标端数据源

目标端输出

来源端数据源

目标端数据源

目标端输出

  • MySQL

  • PostgreSQL

  • Oracle

MaxCompute

实时集成至MaxCompute

  • MySQL

  • Microsoft SQL Server

  • PostgreSQL

  • Oracle

MySQL

实时集成至MySQL

  • MySQL

  • Microsoft SQL Server

  • PostgreSQL

  • Oracle

Oracle

实时集成至Oracle

  • MySQL

  • Microsoft SQL Server

  • PostgreSQL

  • Oracle

  • IBM DB2

Kafka

实时集成数据至Kafka

  • MySQL

  • PostgreSQL

  • Oracle

DataHub

实时集成数据至DataHub

  • MySQL

  • PostgreSQL

  • Oracle

Microsoft SQL Server

实时集成至Microsoft SQL Server

  • MySQL

  • PostgreSQL

  • Oracle

Databricks

实时集成至Databricks

Apache Flink(yarn)

来源端数据源

目标端数据源

目标端输出

来源端数据源

目标端数据源

目标端输出

  • MySQL

  • PostgreSQL

  • Oracle

MaxCompute

实时集成至MaxCompute

  • MySQL

  • Microsoft SQL Server

  • PostgreSQL

  • Oracle

MySQL

实时集成至MySQL

  • MySQL

  • Microsoft SQL Server

  • PostgreSQL

  • Oracle

Oracle

实时集成至Oracle

  • MySQL

  • Microsoft SQL Server

  • PostgreSQL

  • Oracle

  • IBM DB2

Kafka

实时集成数据至Kafka

  • MySQL

  • PostgreSQL

  • Oracle

DataHub

实时集成数据至DataHub

  • MySQL

  • PostgreSQL

  • Oracle

  • Kafka

Hive

实时集成数据至Hive

说明

不支持阿里云EMR 5.x作为目标库。

  • MySQL

  • PostgreSQL

  • Oracle

Microsoft SQL Server

实时集成至Microsoft SQL Server

  • MySQL

  • PostgreSQL

  • Oracle

Databricks

实时集成至Databricks

Apache Flink(K8s)

来源端数据源

目标端数据源

目标端输出

来源端数据源

目标端数据源

目标端输出

  • MySQL

  • Microsoft SQL Server

  • PostgreSQL

  • Oracle

MySQL

实时集成至MySQL

  • MySQL

  • Microsoft SQL Server

  • PostgreSQL

  • Oracle

Oracle

实时集成至Oracle

  • MySQL

  • Microsoft SQL Server

  • PostgreSQL

  • Oracle

Kafka

实时集成数据至Kafka

  • MySQL

  • PostgreSQL

  • Oracle

Microsoft SQL Server

实时集成至Microsoft SQL Server

  • MySQL

  • PostgreSQL

  • Oracle

Databricks

实时集成至Databricks

  • 本页导读 (0)
  • 功能概述
  • 实时集成支持的数据源
  • 阿里云实时计算引擎FLINK(VVP)
  • Apache Flink(yarn)
  • Apache Flink(K8s)