创建数据流转规则时,需编写SQL来解析和处理设备上报的JSON数据。二进制格式的数据不做解析,直接透传。本文主要介绍如何编写数据流转规则的SQL表达式。
SQL表达式
您可使用新版云产品流转功能,通过编辑脚本访问标识符以数字开头的物模型,进行数据流转。具体内容,请参见脚本编写说明。
JSON数据可以映射为虚拟的表,其中Key对应表的列,Value对应列值,因此可以使用SQL来进行数据处理。数据流转规则的SQL表达示意图如下:
数据流转规则SQL示例:
- 处理自定义Topic数据的SQL示例。
某环境传感器可以采集温度、湿度及气压数据。设备上报到自定义Topic:/a1hRrzD****/+/user/update的数据如下:
{ "temperature":25.1, "humidity":65, "pressure":101.5, "location":"***,***" }
设置温度大于38℃时触发规则,并筛选出设备名称、温度和位置信息,SQL语句如下:
SELECT temperature as t, deviceName() as deviceName, location FROM "/a1hRrzD****/+/user/update" WHERE temperature > 38
- 处理基础通信Topic、物模型通信Topic数据的SQL示例。基础通信Topic、物模型通信Topic中的数据流转到规则引擎后,规则引擎会对数据进行解析,解析后的数据格式,请参见数据格式。
某温湿度传感器的属性如下:
温湿度传感器上报的温度和湿度属性数据经规则引擎解析后,数据格式如下:
{ "deviceType": "TemperatureHumidityDetector", "iotId": "N5KURkKdibnZvSls****000100", "productKey": "a15NNfl****", "gmtCreate": 1564569974224, "deviceName": "N5KURkKdibnZvSls3Yfx", "items": { "CurrentHumidity": { "value": 70, "time": 1564569974229 }, "CurrentTemperature": { "value": 23.5, "time": 1564569974229 } } }
重要 SQL查询时,必须通过items.${属性标识符}.value
来访问指定属性的数据。设置温度值大于38℃时触发规则,并筛选出设备名称、当前温度和当前湿度,SQL语句如下:
SELECT deviceName() as deviceName, items.CurrentHumidity.value as Humidity, items.CurrentTemperature.value as Temperature FROM "/sysa15NNfl****/N5KUR***/thing/event/property/post" WHERE items.CurrentTemperature.value > 38
如果是自定义模块(testFB)下属性,属性标识符格式为
${模块标识符}:${属性标识符}
,访问指定属性数据时,必须使用英文双引号(“”),SQL语句如下:SELECT deviceName() as deviceName, "items.testFB:CurrentHumidity.value" as Humidity, "items.testFB:CurrentTemperature.value" as Temperature FROM "/sysa15NNfl****/N5KUR***/thing/event/property/post" WHERE "items.testFB:CurrentTemperature.value" > 38
SELECT
- JSON数据格式
SELECT语句中的字段,可以使用上报消息的payload解析结果,即JSON中的键值,也可以使用SQL内置的函数,如
deviceName()
。规则引擎内置的SQL函数,请参见函数列表。支持
*
和函数的组合。不支持子SQL查询。上报的JSON数据格式,可以是数组或者嵌套的JSON。SQL语句支持使用JSONPath获取其中的属性值,如对于
{a:{key1:v1, key2:v2}}
,可以通过a.key2
获取到值v2
。使用变量时,需要注意单双引号区别:单引号表示常量,双引号或不加引号表示变量。如使用单引号'a.key2'
,值为a.key2
。本文SQL示例中:
- 处理自定义Topic数据SQL的SELECT语句
SELECT temperature as t, deviceName() as deviceName, location
中,temperature
和loaction
来自于上报数据中的字段,deviceName()
则使用了内置的SQL函数。 - 处理上报属性Topic数据SQL的SELECT语句
SELECT deviceName() as deviceName, items.CurrentHumidity.value as Humidity, items.CurrentTemperature.value as Temperature
中,items.CurrentHumidity.value
和items.CurrentTemperature.value
来自于上报的默认模块属性数据中的字段,deviceName()
则使用了内置的SQL函数。说明items.testFB:CurrentHumidity.value
和items.testFB:CurrentTemperature.value
来自于上报的自定义模块属性数据中的字段。
- 处理自定义Topic数据SQL的SELECT语句
- 二进制数据格式
- 可填
*
直接透传数据。*
后不能再使用函数。 - 可使用内置函数,如
to_base64(*)
函数,将原始payload二进制数据转成base64的String提取出来;deviceName()
函数,将设备名称信息提取出来。
- 可填
FROM
FROM可以填写为Topic,用于匹配需要处理的设备消息来源Topic。Topic中的设备名(deviceName)类目可以填写为通配符加号(+),代表当前层级所有类目,即产品下的所有设备;指定为自定义Topic时,还可以使用通配符井号(#),代表Topic中当前层级及之后的所有类目。通配符说明,请参见自定义Topic。
当来自指定Topic的消息到达时,消息的payload数据以JSON格式解析,并根据SQL语句进行处理。如果消息格式不合法,将忽略此条消息。您可以使用topic()
函数引用具体的Topic值。
以上SQL示例中:
FROM "/a1hRrzD****/+/user/update"
语句表示该SQL仅处理自定义Topic:/a1hRrzD****/+/user/update的消息。FROM "/sys/a15NNfl****/N5KURkKdibnZvSls3Yfx/thing/event/property/post"
语句表示该SQL仅处理设备N5KURkKdibnZvSls3Yfx上报属性的Topic中的消息。
WHERE
- JSON数据格式
规则触发条件,条件表达式。不支持子SQL查询。WHERE中可以使用的字段和SELECT语句一致,当接收到对应Topic的消息时,WHERE语句的结果会作为是否触发规则的判断条件。具体条件表达式,请参见以下章节:条件表达式支持列表。
上文两个示例中,条件语句
WHERE temperature > 38
表示温度大于38℃时,才会触发该规则。 - 二进制数据格式
目前二进制格式WHERE语句中,仅支持内置函数及条件表达式,无法使用payload中的字段。
SQL结果
SQL语句执行完成后,会得到对应的SQL结果,用于下一步转发处理。如果payload数据解析过程中出错,会导致规则运行失败。
如果要将数据流转到表格存储中,设置转发数据目的地时,需要使用变量格式${表达式}
引用对应的值。
如果以上两个示例SQL对应的规则需将数据流转到表格存储的数据表中,主键对应的值可分别配置为:
- ${t}、${deviceName}和${loaction}。
- ${deviceName}、${Humidity}和${Temperature}。
数组使用说明
数组表达式需要使用双引号,用$.
表示取jsonObject,$.
可以省略,.
表示取jsonArray。
{"a":[{"v":0},{"v":1},{"v":2}]}
,不同表达式结果如下: "a[0]"
结果为{"v":0}
"$.a[0]"
结果为{"v":0}
".a[0]"
结果为[{"v":0}]
"a[1].v"
结果为1
"$.a[1].v"
结果为1
".a[1].v"
结果为[1]
条件表达式支持列表
操作符 | 描述 | 举例 |
---|---|---|
= | 相等 | color = 'red' |
<> | 不等于 | color <> 'red' |
AND | 逻辑与 | color = 'red' AND siren = 'on' |
OR | 逻辑或 | color = 'red' OR siren = 'on' |
+ | 算术加法 | 4 + 5 |
- | 算术减 | 5 - 4 |
/ | 除 | 20 / 4 |
* | 乘 | 5 * 4 |
% | 取余数 | 20 % 6 |
< | 小于 | 5 < 6 |
<= | 小于或等于 | 5 <= 6 |
> | 大于 | 6 > 5 |
>= | 大于或等于 | 6 >= 5 |
函数调用 | 支持函数,更多信息,请参见函数列表。 | deviceId() |
JSON属性表达式 | 可以从消息payload以JSON表达式提取属性。 | state.desired.color,a.b.c[0].d |
CASE … WHEN … THEN … ELSE …END | Case表达式(不支持嵌套)。 | CASE col WHEN 1 THEN 'Y' WHEN 0 THEN 'N' ELSE '' END as flag |
IN | 仅支持枚举,不支持子查询。 | 例如:where a in(1,2,3)。不支持以下形式:where a in(select xxx)。 |
like | 匹配某个字符,仅支持% 通配符,代表匹配任意字符串。
| where c1 like '%abc' |
not like | where c1 not like '%def%' |
调试SQL
若创建数据流转规则时,数据格式选择了JSON,可在物联网平台进行SQL在线调试。调试方法如下。
- 编写SQL后,单击SQL调试。
- 在SQL调试对话框的调试参数页签下,输入用于调试数据,然后单击调试。
请根据Topic上报的数据格式,输入调试用的payload数据。数据格式说明:
- 若Topic为自定义Topic,输入的payload数据格式需与Topic上报的数据格式一致。
- 若Topic为基础通信Topic或物模型通信Topic,请参见数据格式。
- 单击调试结果,查看结果。