Hologres输出组件用于向Hologres数据源写入数据。同步其他数据源的数据至Hologres数据源的场景中,完成源数据的信息配置后,需要配置Hologres输出组件的目标数据源。本文为您介绍如何配置Hologres输出组件。

前提条件

  • 已创建Hologres数据源并已申请Hologres数据源的同步写权限:
  • 已为Hologres数据源创建数据表。具体操作,请参见

操作步骤

  1. 请参见配置离线单条管道,进入离线单条管道脚本的开发页面。
  2. 在离线单条管道脚本的开发页面,单击页面右上角的组件库
  3. 单击输出前的dgd图标。
  4. 拖动Hologres组件至左侧的管道画布中。
  5. 鼠标悬停至Hologres组件框内右键单击,选择属性配置
  6. Hologres输出配置对话框,配置参数。
    参数 说明
    步骤名称 即Hologres输出组件的名称。Dataphin自动生成步骤名称,您也可以根据业务场景修改。命名规则如下:
    • 只能包含汉字、字母、下划线(_)、数字。
    • 不能超过64个字符。
    数据源 选择Hologres类型的数据源。

    如果您还没有Hologres类型的数据源,单击dfag图标,创建数据源。具体操作,请参见创建Hologres数据源

    选择Hologres数据源中的数据表。

    如果Hologres数据源中还没有数据表,则需要提前创建数据表。具体操作,请参见

    写入模式 源数据源的数据写入目标数据源(Hologres数据源)的模式。写入模式包括SDK模式和SQL模式,适用场景说明如下:
    • Hologres 0.8版本推荐选择SDK模式。
    • Hologres 0.9及之后版本推荐选择SQL模式。
    加载策略 向目标数据源(Hologres数据源)写入数据时,数据写入表中的策略。加载策略包括覆盖和忽略,适用场景说明如下:
    • 覆盖:写入的数据中有主键时新数据覆盖旧数据,无主键时追加数据。
    • 忽略:写入的数据中有主键时忽略新数据,无主键时追加数据。
    分区 选择写入数据的分区。
    输入字段 展示从源表中读取的字段。
    输出字段 展示目标表的字段。
    映射关系 映射关系用于将源表的输入字段和目标表的输出字段映射起来。映射关系包括同名映射和同行映射。适用场景说明如下:
    • 同名映射:对字段名称相同的字段进行映射。
      如下图所示,选择同名映射后,输入id字段对应的数据映射到输出字段的id中。gagag
    • 同行映射:源表和目标表的字段名称不一致,但字段对应行的数据需要映射。只映射同行的字段。
      例如,endpoint_type字段对应的数据映射至id字段中。faga
  7. 单击确认,完成Hologres输出组件的配置。

后续步骤

完成输出组件的配置后,即可配置离线单条管道的调度参数。具体操作,请参见配置离线单条管道