Map映射函数和运算符
示例 使用histogram函数获取各个请求方法对应的请求数量，再通过cardinality函数获取请求方法的种类数。查询和分析语句*|SELECT histogram(request_method)AS request_method,cardinality(histogram(request_method))AS"kinds"查询和分析...
EXTRACT
函数EXTRACT用于从日期/时间字段中获取像年份或小时这样的子字段。函数EXTRACT返回值的类型是DOUBLE PRECISION。YEAR 表示年的字段。SELECT EXTRACT(YEAR FROM TIMESTAMP '2001-02-16 20:38:40')FROM DUAL;date_part-2001(1 row)MONTH 表示...
扫描（Scan）查询概述
字段值长度超过了索引限制，超出部分无法被查询。字段名较多，事先无法获取具体的字段名，无法建立字段索引。字段类型发生变化，无法查询。针对上述问题，日志服务推出扫描查询和扫描分析功能，用于查询和分析日志，无需对扫描的目标字段...
如何查看模板中的Map值
查看单层映射值 您可以通过调用下列函数获取单层映射中的值。说明 不建议您在模板中的Mappings部分定义单层Map，ROS无法获取Mappings中单层Map的值。更多信息，请参见 映射（Mappings）。Fn:Select 说明 推荐您使用该函数获取单层Map的值。...
数据类型
重要 如果设置数据类型为long，而实际字段值为浮点数类型，则无法查询该字段。如果设置数据类型为long或double，而实际字段值为字符串类型，则无法查询该字段。如果设置数据类型为long或double，则不支持使用星号（*）或半角问号?进行模糊...
文本查询
说明 如果您配置默认值时选择排除该字段值，又将下拉列表的样式切换为平铺，则在查询控件中选择该字段值，表示排除该字段。如果您先配置的平铺样式，又在配置默认值时选择排除该字段值，则将普通平铺样式替换成平铺排除的样式。单击 清空，...
比较运算符
示例 对同一行中的 request_time 字段值和 status 字段值进行对比，获取其中的最小值。字段样例 request_time:77 status:200 查询和分析语句*|SELECT LEAST(request_time,status)查询和分析结果 NULL运算符 NULL运算符用于判断 x 是否为...
函数总览
字段值提取函数 e_regex 根据正则表达式提取字段的值并赋值给其他字段。e_json 对日志特定字段中的JSON对象进行JSON操作，包括JSON展开、JMES提取或者JMES提取后再展开。e_kv 通过quote提取多个源字段中的键值对信息。e_kv_delimit 通过...
通用参考
举例如下：SPL语句*|extend status_cast=cast(status as bigint)输入数据 Status:'200' status:'404' 处理结果 第一种可能结果，保留Status字段值 Status:'200'-保留第1列，舍弃第2列 status_cast:'200' 第二种可能结果，保留status字段值 ...
Ganos函数列表
AnalyticDB PostgreSQL版 Ganos时空引擎（以下简称Ganos）提供一系列的数据类型、函数和存储过程，用于在AnalyticDB PostgreSQL版数据库中对空间或时空数据进行高效的存储、索引、查询和分析计算。关于Ganos时空引擎的更多介绍，请参见 ...
函数概览
element_at函数 获取Map中目标键的值。histogram函数 对查询和分析结果进行分组，返回结果为JSON格式。histogram_u函数 对查询和分析结果进行分组，返回结果为多行多列格式。map函数 返回一个空Map。将两个数组映射为一个Map。map_agg函数 ...
使用示例
目前云呼叫中心与阿里云函数计算做了集成，如下图所示，用户可以通过函数计算完成云呼叫中心IVR对第三方服务或者自有业务系统的调用。本文将通过一个IVR调用第三方接口查询号码归属地的案例来说明具体的操作配置流程。背景 我有一个呼叫...
函数列表
配置云产品流转过程中，您可以在编写解析器脚本时使用数据类型转换函数、时间类型转换函数、基础数据类型函数和流转数据到数据目的函数等方法，实现数据多样化处理。本文介绍相关函数的表达式及其使用说明。除本文支持的函数表达式外，云...
格网聚合层（v4.x版本）
本文介绍格网聚合层各配置项的含义。图表样式 格网聚合层是基础平面地图 4.0的子组件，支持独立的样式和数据配置，包括格网的尺寸大小、颜色和标注等，能够以聚合格...再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。
算子功能详解
但int32(field)+1.2是不可以的 4)string类型不可以强制转换为数值类型 score字段：新增返回字段，字段值为上述表达式的计算结果，可用于后续算子使用。可自定义字段名，注意不能和已有字段重复。Sorter排序 排序字段：单选，Recall 组件...
API
} 参数：字段 类型 含义 备注 fn Function 导航菜单更新回调函数 返回值：无。offNavChange 设计时移除监听导航菜单更新的回调函数。定义：interface ComponentApi offNavChange:(fn:()=>void)=>void;} 参数：字段 类型 含义 备注 fn ...
时空引擎版本发布记录
ST_LineSubstring 函数新增支持地理数据类型，支持基于球面距离获取子段。ST_LineInterpolatePoint 函数新增支持地理数据类型，支持基于球面距离获取点位。ST_LineInterpolatePoints 函数新增支持地理数据类型，支持基于球面距离插值点。ST...
数据序列化和持久化
基础数据序列化 使用 Schema 持久化数据 基础数据序列化 可序列化的数据可以使用 pack()函数序列化为字节串（即 std:string），并且可以使用 unpack()函数将对应的字节串反序列化为原来的值。std:string buff=pack("hello"s);std:string ...
SQL表达式
SQL语句支持使用JSONPath获取其中的属性值，如对于 {a:{key1:v1,key2:v2}}，可以通过 a.key2 获取到值 v2。使用变量时，需要注意单双引号区别：单引号表示常量，双引号或不加引号表示变量。如使用单引号 'a.key2'，值为 a.key2。本文SQL...
表达式函数概览
函数分类 函数名称 说明 事件检查函数 e_has 判断日志字段是否存在。e_not_has 判断日志字段是否不存在。e_search 提供一种简化，类似Lucene语法的日志搜索方式。e_match、e_match_all、e_match_any 判断当前日志字段的值是否满足正则表达...
扩展字段
可见：用户能看到字段值，但无法主动编辑。可编辑：用户可以对自己在该字段中的值进行查看和编辑。可编辑。填写扩展字段 创建完新字段，确保字段处于启用状态后，即可使用。管理员可以来到【账户与组织】菜单，点击【创建账户】按钮。在弹...
2020年
无 栅格数据自定义元数据以及时序信息 新增ST_MetaItems函数，获取所有的自定义元数据项目名称。ST_MetaItems 新增ST_MetaData函数，获取自定义元数据项以及返回以JSON方式表达的元数据项。ST_MetaData 新增ST_SetMetaData函数，用于设置...
时空数据库版本发布记录
ST_LineSubstring 函数新增支持地理数据类型，支持基于球面距离获取子段。ST_LineInterpolatePoint 函数新增支持地理数据类型，支持基于球面距离获取点位。ST_LineInterpolatePoints 函数新增支持地理数据类型，支持基于球面距离插值点。ST...
时空数据库版本发布记录
ST_LineSubstring 函数新增支持地理数据类型，支持基于球面距离获取子段。ST_LineInterpolatePoint 函数新增支持地理数据类型，支持基于球面距离获取点位。ST_LineInterpolatePoints 函数新增支持地理数据类型，支持基于球面距离插值点。ST...
查询和分析JSON日志的常见问题
那么您要分析 errcode 的分布情况，则需先使用查询语句过滤出请求失败的日志，然后在分析语句中使用JSON函数动态提取 errcode 字段值。not response:SUCCESS|SELECT json_extract_scalar(response,'$.errcode')AS errcode 查询和分析结果...
字段操作函数
调用组合表达式函数，获取第一个存在的字段值，返回其小写格式并赋值给字段 result。e_set("result",str_lower(v("ret","return")))示例4：多次设置字段值。设置字段 event_type 的值。e_set("event_type","login event","event_info",...
如何创建自定义PPT应用
本教程主要以数据集为数据源，用分析模式来实现可交互的可视化应用。视频链接 DataV小课堂直播视频：数据源管理-自定义PPT...说明 通过这两个函数获取数据抛出的格式，然后通过使用键盘的上下键，可以在可视化应用展示页面，查看设置的效果。
DBMS_PIPE
DBMS_PIPE子程序总览 子程序 说明 CREATE_PIPE Function 创建一个命名管道。NEXT_ITER_TYPE Function 返回缓冲区中下一个数据成员的数据类型。PACK_MESSAGE Procedures 将一个数据项放入会话的本地消息缓冲区中。UNPACK_MESSAGE Procedures...
全局操作函数概览
字段值提取函数 e_regex 根据正则表达式提取字段的值并赋值给其他字段。e_json 对特定字段中的JSON对象进行JSON操作，包括JSON展开、JMES提取或者JMES提取后再展开。e_kv 通过quote提取多个源字段中的键值对信息。e_kv_delimit 通过分隔符...
错误码说明
10001 没有指定的tddl group key，tddl信息获取失败 10002 获取字段失败或者表不存在 10011 连接agg失败 10012 应用里存在doc 10013 应用不是自定义结构 10110 该任务已结束 10010 部分数据源有问题，已经忽略有错误的数据 10014 数据源...
错误码说明
10001 没有指定的tddl group key，tddl信息获取失败 10002 获取字段失败或者表不存在 10011 连接agg失败 10012 应用里存在doc 10013 应用不是自定义结构 10110 该任务已结束 10010 部分数据源有问题，已经忽略有错误的数据 10014 数据源...
从OSS获取CSV文件进行数据富化
本文档介绍如何通过资源函数和映射富化函数从OSS中获取数据对日志数据进行富化。前提条件 已创建访问密钥（AccessKey），用于访问OSS Bucket，详情请参见 创建AccessKey。推荐创建一个只读权限的AccessKey，用于从OSS获取文件；一个只写...
语言简介
字段值提取函数 支持通过正则表达式、GROK、KV、KV分隔符、CSV、TSV、PSV、Syslog等方式提取字段中的多个值或键值对。支持JSON数据提取并进行富化。映射富化函数 支持基于字典、表格进行映射或搜索。支持从规则配置、外部OSS Bucket、RDS ...
使用限制
30字符 字段名长度 30字符 排序表达式名称长度 30字符 字段个数 256个 512个 源表表名长度 16字符 索引字段名 64字符 INT类字段个数 256个 TIMESTAMP类型的字段个数 4个 GEO_POINT类型的字段个数 2个 LITERAL字段个数（不支持创建为组合...
增值内容函数
e_threat_intelligence 调用e_threat_intelligence函数获取日志字段中IP地址或域名的威胁情报信息并输出到指定字段。若所扫描内容没有威胁情报信息，则不会输出到指定字段，不影响您的数据加工任务。由阿里云威胁情报服务提供最近30天出现...
从RDS MySQL数据库获取数据进行数据富化
time:1563436326 data:123 city:nanjing province:jiangsu 加工规则 根据指定的RDS MySQL数据库表中的字段值（例如 content 字段的值）去匹配日志字段，其中指定的RDS MySQL数据库表中的字段值为Key-Value形式，Key对应日志字段，Value为正...
使用e_dict_map、e_search_dict_map函数进行数据富化
普通映射函数包括 e_dict_map 函数和 e_table_map 函数，两者区别在于e_dict_map函数接收的是dict类型的数据，e_table_map函数接收的是通过 资源函数 获取的table类型的数据。例如：在nginx日志中，将特定的状态码转换为文本格式，可以使用...
脚本语法
脚本编写说明 脚本编写方法如下：通过payload函数，获取设备上报的消息内容，并按照JSON格式转换。var data=payload("json");重要 解析处理的数据源必须转换为JSON格式数据，即数组或者嵌套的JSON数据。定义字段，然后获取payload中属性值...
单位换算函数
通过convert_data_size函数将字段值换算为以KB为单位的值。查询和分析语句*|select convert_data_size(format_data_size(body_bytes_sent,'KB'))查询和分析结果 format_data_size函数 format_data_size函数用于对Byte单位进行换算，返回...
分页类接口结果聚合
aliyun ecs DescribeInstances-pager 说明 由于该接口返回的值都符合子字段默认的值，如上命令中省略了所有的子字段。完整命令格式如下：aliyun ecs DescribeInstances-pager PageNumber=PageNumber PageSize=PageSize TotalCount=...
- 产品推荐
- 这些文档可能帮助您