离线集成输入端支持MySQL数据源分库分表

更新时间:
复制为 MD 格式

场景描述

Dataphin支持通过数据库分库分表提升操作性能,并将分库分表的数据集成到Dataphin。

解决方案与功能

  1. 在数据集成的组件中支持枚举、类正则及两者混合的方式读取多个数据库中的表。

    • 枚举

      table_001,table_002等:读取table_001、table_002的表。

    • 类正则

      • table_abc* :读取以table_abc为前缀的所有表。

      • table_[001-100] :读取table001table100100张表。

    • 两者混合:table_001;table_002;table_abc* ;table_[001-100]。

      image

  2. 单击精准查找,在确认匹配详情对话框中,预览数据源名称、库名和表名。

    image

  3. 每次运行时都会按照查找规则重新查找最新的表进行同步。