Dataphin支持通过数据同步的方式,将业务数据源的数据引入Dataphin平台。

如果您是在2020年4月之后购买的Dataphin,则数据同步能力通过数据集成功能实现(即系统不再提供数据同步的功能入口)。数据集成为您提供简单高效、安全可靠的数据同步平台。

数据同步支持通过界面配置及编写代码的方式构建同步任务,以满足不同业务场景的数据同步:
  • 界面配置的方式构建同步任务的流程。数据引入流程
    1. 新建管理同步任务文件夹,详情请参见新建同步任务文件夹
    2. 新建同步任务的目标表,详情请参见新建同步目标表
    3. 新建同步任务,详情请参见新建同步任务
    4. 配置同步任务,详情请参见配置同步任务
      说明 系统默认为同步任务分配0.5核CPU、1GB内存,暂不支持扩大资源量。
    5. 配置同步任务的调度参数,详情请参见调度配置
      说明 系统仅支持周期性节点的同步任务进行调度配置。
  • 编写代码的方式构建代码任务,以实现数据同步的流程:
    1. 上传应用函数资源,详情请参见新建资源
    2. 新建脚本中使用到函数,详情请参见新建用户自定义函数
    3. 新建同步目标表的创建,详情请参见新建同步目标表
    4. 新建代码任务,详情请参见新建Shell任务
    5. 配置代码任务中的调度参数,详情请参见调度配置