本文为您介绍如何配置、复制、删除FTP组件。

背景信息

FTP输出组件适用于将Dataphin加工后的数据写入至FTP,进行数据消费的场景。

配置属性

  1. 登录Dataphin控制台
  2. 在Dataphin控制台页面,选择工作区地域后,单击进入Dataphin>>
  3. 执行以下操作,创建离线单条管道。
    1. 在Dataphin首页,单击顶部菜单栏的研发
    2. 在数据开发页面,单击项目名称后的test图标,选择数据开发的项目空间(DevBasic项目)。
      如果您当前访问的是DevBasic项目,且项目空间为您的数据开发空间,则不需要选择项目空间。
    3. 在数据开发页面,将鼠标悬停在顶部菜单栏的开发上,单击集成
    4. 在数据集成页面,将鼠标悬停在脚本后的ddd图标,单击离线单条管道sss
    5. 根据创建管道开发脚本对话框提示,配置参数。
      ddd
      参数 描述
      管道名称 填写管道名称。
      调度类型 选择管道的调度类型。调度类型包括:
      • 周期性节点指需定期执行的任务。
      • 手动节点指没有依赖关系,需手动触发的任务。
      描述 填写对离线单条管道的简单描述。
      选择目录 选择离线单条管道所在的文件夹。
    6. 单击确定,完成离线单条管道的创建。
  4. 在离线单条管道脚本的开发页面,单击页面右上角的组件库
    ddd
  5. 单击输出前的dgd图标。
  6. FTP组件拖到左侧的管道画布中。
  7. 将鼠标放置在FTP组件框内右键单击,选择属性配置
  8. 根据FTP输出配置对话框提示,配置参数。
    faga
    参数 说明
    步骤名称 根据当前组件的使用场景,填写组件名称。
    数据源 选择数据源。选择Dataphin系统已配置的数据源,且数据源需同时具备以下两个条件:
    • 数据源的类型与输出组件的类型一致。
    • 执行属性配置的账号具有该数据源的同步写权限,如果没有权限,则需要申请数据源权限,详情请参见操作数据源权限
    同时您也可以单击数据源后的geg图标,添加数据源,详情请参见新建FTP数据源
    文件路径 填写文件路径。
    文件类型 选择文件类型。文件类型包括TexTCSV
    文件编码 选择文件编码。文件编码包括UTF-8GBK
    字段分隔符 非必填项,填写字段之间分隔符。如果您没有填写,则系统自动添加英文逗号(,)作为分隔符。
    加载策略> 选择数据写入目标表的策略。加载策略包括:
    • 覆盖数据即以当前来源表为准,覆盖目标表中的历史数据。
    • 追加数据即在目标表的已有的数据基础上追加数据,且不修改历史数据。
    输入字段 根据上游的输入,为您展示输入字段。
    输出字段 为您展示输出字段。 您可以手动添加输出字段:
    • 单击批量添加 ,以JSON格式批量配置,示例如下。
      [{  "name":"cf1:a",  "type":"String" },
      {  "name":"cf1:b",  "type":"String" }]
    • 单击新建输出字段,根据页面提示填写字段及选择类型
    同时您也可以对已添加的字段执行如下操作:
    • 单击操作列下的agag图标,编辑已有的字段。
    • 单击操作列下的agfag图标,删除已有的字段。
    快速映射 根据上游的输入和目标表的字段,可以手动选择字段映射。快速映射包括同行映射同名映射
  9. 单击确认,完成FTP输出组件的属性配置。

复制FTP

  1. 将鼠标放置在FTP组件框内右键单击,单击复制
  2. 在管道画布中右键单击后,选择粘贴,完成FTP输出组件的复制。

删除FTP

  1. 将鼠标放置在FTP组件框内右键单击,单击删除
  2. 在确认弹框中单击确定,完成FTP输出组件的删除。