文档

数据解析工作台说明

更新时间:

本文介绍数据解析工作台的导航栏、画布、操作栏功能。

背景信息

您可以使用数据解析工作台,配置数据解析任务分析处理接入数据服务的数据源。更多信息,请参见使用说明

进入数据解析工作台

  1. 物联网平台控制台实例概览页面,单击目标企业版实例ID或备注名称。

  2. 在左侧导航栏,选择数据服务 > 数据解析

  3. 数据解析页面,找到要配置的数据解析任务,单击操作列的查看

    进入数据解析工作台后,各功能分布如下图所示。

    数据管道工作台
    • 左侧导航栏:展示功能节点。

    • 中间画布:配置功能节点,默认已添加源节点

      在中间画布单击节点,可在弹出的右侧面板中配置节点。配置当前节点后,在中间画布单击当前节点后的添加image图标,在弹出的节点列表中单击待添加的下一节点,当前节点后会添加并自动连接下一节点。

      说明

      不支持从左侧导航栏拖拽节点到画布中。

    • 顶部操作栏:整体管理解析任务。

    说明
    • 一个数据解析任务中可有一个输入节点、多个处理节点、一个输出节点。

    • 前一个节点中配置的数据,是后一个节点可使用的数据。

    • 数据过滤可配置在数据计算之前或之后。

左侧导航栏

功能

节点

说明

相关文档

输入

源节点

选择待处理数据的数据源。

配置源节点

自定义

源节点中数据源的Topic格式原始数据时,在源节点后会自动添加并连接自定义节点,用于配置自定义脚本解析原始数据。

编写自定义脚本

处理

数据计算

根据源节点配置,自动匹配显示相关字段数据。

您可通过配置表达式,计算已有字段数据,来生成新字段数据。

配置数据计算和数据过滤

数据过滤

配置过滤条件,指定只输出满足特定条件的数据。

值转化

配置判断条件,将解析任务中流转消息的某个字段的值,转化为另一个值,该值可以输出到原字段或新定义的字段。

配置值转化

数据聚合

类比为Flink SQL的窗口函数,将解析任务中流转消息的字段按照窗口进行聚合计算。

配置数据聚合

超时插值

在数据上报产生中断时,配置固定的策略进行补值,防止数据出现中断。

配置超时插值

相邻消息计算

取当前消息与前一条消息中的同一数值字段的值(仅支持BIGINT、DOUBLE类型),按照定义的表达式进行计算,将计算的结果输出到定义的输出字段上。

配置相邻消息计算

输出

目标节点

将解析后的数据转入IoT实例Topic、IoT孪生引擎中使用,或IoT实例自定义存储表中存储。

选择在自定义存储表中存储时,根据处理功能节点的输出配置,自动匹配显示可输出的字段。您可根据需要删除、修改字段,完成最终输出结果配置。

配置目标节点

中间画布

功能

说明

调试

位于画布左上角。

解析配置完成后,可单击此图标,试跑解析任务。

  • 若试跑成功,单击画布下方的数据结构,可查看解析后的对应内容。

  • 若试跑失败,则出现报错。根据提示修正配置后,重新试跑。

放大

位于画布左下角。单击此图标,可放大画布比例。

缩小

位于画布左下角。单击此图标,可缩小画布比例。

调整位置

位于画布左下角。单击此图标,可自动调整画布中所有节点位置。

解锁

位于画布左下角。当前画布在解锁状态,可编辑功能节点。

重要

如果需要更新解析任务的解析配置,需先停止解析任务,解锁画布。

锁定

位于画布左下角。当前画布被锁定,不可再编辑功能节点。数据解析任务上线后,画布会自动锁定。

数据预览

位于画布下方,可预览配置后的数据。

数据结构

位于画布下方,可展示字段名称和字段类型。

顶部操作栏

从左至右功能如下。

功能

说明

返回列表

单击该图标可返回数据解析任务列表。

该图标右侧显示的是当前解析任务名称。

修改名称

修改任务名称描述

线上运行中

任务上线后,显示该提示。

上次保存于

最近一次保存时间。

保存

单击此按钮,保存当前配置。

启动

启动当前数据解析任务。详细内容,请参见启动数据解析任务

说明

解析任务启动运行后,数据解析中的所有功能节点都不可再编辑。

停止

停止当前数据解析任务。

更多功能

单击该图标后,可选择帮助