文档

配置本地文件输入组件

更新时间:

本地文件输入组件可用于将本地文件的TXT、excel、CSV格式的数据。同步至其他数据源的场景中。本文为您介绍如何配置本地文件输入组件。

使用限制

仅支持手动任务配置本地文件输入组件。

操作步骤

  1. 请参见,进入离线管道组件开发页面。

  2. 按照下图操作指引,进入本地文件输入配置对话框。

    未命名..gif

  3. 本地CSV输入配置对话框,支持选择csv、text、xls、xlsx的文件类型,各配置说明如下:

    • text文件类型。

      image..png

      参数

      描述

      步骤名称

      根据当前组件的使用场景,填写名称。

      文件类型

      支持csv、text、xls、xlsx的文件类型。

      文件路径

      单击选择文件,上传csv、text、xls、xlsx格式的文件。

      说明

      .txt类型的文件,文件不超过500MB。

      首行内容类型

      支持数据内容和字段名称。

      首行内容起始行

      首行内容选为字段名称时,数据内容起始行不可小于2;首行内容选为数据内容时,数据内容起始行不可小于1。

      行分隔符字段分隔符

      非必填。

      行分隔符文件行分隔符,如不填写,默认为\n

      字段分隔符:文件内字段分隔符,如不填写,默认为英文逗号(,)。

      文件编码

      选择文件编码的方式。系统支持UTF-8和GBK方式。

      高级配置

      请输入读取控制配置项。示例代码如下:

      {
       "textReaderConfig":{
       "caseSensitive":true,
       "useTextQualifier":false,
       "textQualifier":"\"",
       "trimWhitespace":false
       }
      }

      新建输出字段

      新建输出字段:

      1. 单击新建输出字段

      2. 根据页面提示,配置来源序号字段,选择字段类型。

      对于已添加的字段,您可以单击操作列下的test图标,删除字段。

    • csv文件类型。

      image..png

      参数

      描述

      步骤名称

      根据当前组件的使用场景,填写名称。

      文件类型

      选择csv文件类型。

      文件路径

      单击选择文件,上传csv格式的文件。

      字符分隔符

      文件内字段分隔符,如不填写,默认为英文逗号(,)。

      文件编码

      选择文件编码的方式。系统支持UTF-8和GBK方式。

      首行内容类型

      支持数据内容和字段名称。

      数据内容起始行

      首行内容选为字段名称时,数据内容起始行不可小于2;首行内容选为数据内容时,数据内容起始行不可小于1。

      新建输出字段

      新建输出字段:

      1. 单击新建输出字段

      2. 根据页面提示,配置来源序号字段,选择字段类型。

      对于已添加的字段,您可以单击操作列下的test图标,删除字段。

    • xls或xlsx文件类型。

      参数

      描述

      步骤名称

      根据当前组件的使用场景,填写名称。

      文件类型

      选择xls、xlsx文件类型。

      文件路径

      单击选择文件,上传xls、xlsx格式的文件。

      说明

      xls和xlsx类型的文件,文件不超过500MB。

      sheet选择

      支持按名称或按索引进行选择。

      • 按名称:输入要读取的sheet名称。

      • 按索引:输入要读取的sheet索引,索引从0开始。

      首行内容类型

      支持数据内容和字段名称。

      数据内容起始行

      首行内容选为字段名称时,数据内容起始行不可小于2;首行内容选为数据内容时,数据内容起始行不可小于1。

      数据内容结束行

      数据内容结束行不可大于起始行。如不指定,则默认读到有数据的最后一行。

      导出sheet名

      可选是否导出数据的来源sheet。导出内容为{文件名}-{sheet名}

      文件编码

      选择文件编码的方式。系统支持UTF-8和GBK方式。

      新建输出字段

      新建输出字段:

      1. 单击新建输出字段

      2. 根据页面提示,配置来源序号字段,选择字段类型。

      对于已添加的字段,您可以单击操作列下的test图标,删除字段。

  4. 单击确认,完成本地CSV输入组件的属性配置。

后续步骤

完成输入组件的配置后,即可配置下游组件,以实现数据同步。具体操作,请参见离线管道组件开发入口

  • 本页导读 (0)
文档反馈