文档

配置Hologres输出组件

更新时间:

Hologres输出组件用于向Hologres数据源写入数据。同步其他数据源的数据至Hologres数据源的场景中,完成源数据的信息配置后,需要配置Hologres输出组件的目标数据源。本文为您介绍如何配置Hologres输出组件。

前提条件

  • 已创建Hologres数据源并已申请Hologres数据源的同步写权限:

  • 已为Hologres数据源创建数据表。具体操作,请参见

使用限制

不支持写入Hologres数据库的视图。

操作步骤

  1. 请参见配置离线单条管道,进入离线单条管道脚本的开发页面。

  2. 在离线单条管道脚本的开发页面,按照下图操作指引,进入Hologres输出配置对话框。

    z
  3. Hologres输出配置对话框,配置参数。

    z

    参数

    说明

    步骤名称

    即Hologres输出组件的名称。Dataphin自动生成步骤名称,您也可以根据业务场景修改。命名规则如下:

    • 只能包含汉字、字母、下划线(_)、数字。

    • 不能超过64个字符。

    数据源

    选择Hologres类型的数据源。

    如果您还没有Hologres类型的数据源,单击新建,创建数据源。具体操作,请参见创建Hologres数据源

    选择Hologres数据源中的数据表。

    如果Hologres数据源中还没有数据表,则需要提前创建数据表。具体操作,请参见

    写入模式

    源数据源的数据写入目标数据源(Hologres数据源)的模式。写入模式包括SDK模式和SQL模式,适用场景说明如下:

    • Hologres 0.8版本推荐选择SDK模式。

    • Hologres 0.9及之后版本推荐选择SQL模式。

    加载策略

    向目标数据源(Hologres数据源)写入数据时,数据写入表中的策略。加载策略包括覆盖和忽略,适用场景说明如下:

    • 覆盖:写入的数据中有主键时新数据覆盖旧数据,无主键时追加数据。

    • 忽略:写入的数据中有主键时忽略新数据,无主键时追加数据。

    分区

    选择写入数据的分区。

    输入字段

    展示从源表中读取的字段。

    输出字段

    展示目标表的字段。

    映射关系

    映射关系用于将源表的输入字段和目标表的输出字段映射起来。映射关系包括同名映射和同行映射。适用场景说明如下:

    • 同名映射:对字段名称相同的字段进行映射。

      如下图所示,选择同名映射后,输入id字段对应的数据映射到输出字段的id中。gagag

    • 同行映射:源表和目标表的字段名称不一致,但字段对应行的数据需要映射。只映射同行的字段。

      例如,endpoint_type字段对应的数据映射至id字段中。faga

  4. 单击确认,完成Hologres输出组件的配置。

后续步骤

完成输出组件的配置后,即可配置离线单条管道的容错、并发度及内存等参数。具体操作,请参见配置离线单条管道

  • 本页导读 (0)
文档反馈