文档

配置过滤转换组件

更新时间:

过滤转换组件支持将上游组件的输入字段进行过滤转换后输出至下游。本文为您介绍如何配置过滤转换组件。

操作步骤

  1. 请参见离线管道组件开发入口,进入离线管道脚本的开发页面。

  2. 按照以下操作指引,进入转换-过滤配置对话框。

    单击组件库->单击转换->拖拽过滤组件至画布->单击image配置图标。

    image

  3. 转换-过滤配置对话框,配置参数。

    参数

    描述

    步骤名称

    即过滤转换组件的名称。Dataphin自动生成步骤名称,您也可以根据业务场景修改。命名规则如下:

    • 只能包含汉字、字母、下划线(_)、数字。

    • 不能超过64个字符。

    输入字段

    根据上游的输出,为您展示输入字段。

    筛选条件

    填写筛选条件。支持脚本模式和配置模式。

    • 脚本模式:通过脚本方式设置筛选条件。不需要填写WHERE,直接填写WHERE语句后内容。例如,user_id is not nulland name != 'xxx'

    • 配置模式:通过界面化方式设置筛选条件。

    支持的筛选条件包括=!=>>=<<=LIKENOT LIKEIS NULL、IS NOT NULLSTART WITHEND WITH。多个条件之间支持ANDOR逻辑运算符。

    重要

    LIKE操作符不支持使用(%)符号指定起始或结束字符,仅支持过滤出所有包含指定字符的数据。若需指定起始或结束字符,您可以使用START WITHEND WITH语句。例如,name START WITH '张' AND name END WITH '丰' 将过滤name字段起始字符为结束字符为的数据。

  4. 单击确认,完成过滤转换组件的属性配置。