事件内容转换
以下为 事件总线EventBridge 支持的模板类型：简单String 简单JSON 混合变量和常量的JSON 嵌套JSON 表 1.简单String 转换前的事件 转换类型 转换后的事件 {"id":"7adc8c1a-645d-4476-bdef-5d6fb57f*","source":"acs.oss","specversion":"1....
基础类库
JSON 方法 stringify(object):将 object 对象转换为 JSON 字符串，并返回该字符串。parse(string):将 JSON 字符串转化成对象，并返回该对象。示例 console.log(undefined=JSON.stringify());console.log(undefined=JSON.stringify...
复杂类型函数
将一个可能为空的JSON类型对象，转换为包含这些类型的数组。JSON_EXTRACT 解析JSON表达式中对应json_path的数据，注意json_path非法时会报错。JSON_EXISTS 查看json_path对应的JSON值是否存在。JSON_PRETTY 美化JSON，增加换行及空格。JSON...
解析与更新JSON数据
例如，data 字段值为字符串，您可以将其转换为JSON对象。原始日志 data:"pre{ \"k1\":\"v1\",\"k2\":\"v2\"}"加工规则 e_set("json_object",json_parse(op_slice(v("data"),3,28)))加工结果 data:pre{"k1":"v1","k2":"v2"} json_object:{"k...
JSON数据类型
使用 json_array 函数将函数中的数据按照写入顺序转换为数组形式JSON对象，再把JSON对象写入JSON列。String upsert="UPSERT INTO"+tableName+"(p1,c1,c2)VALUES(3,'3',json_array(1,2,json_object('k1',3,'k2','3')));如果使用Lindorm宽表...
控制台的常见问题
如果使用JSON数组，可以把数组嵌套在JSON对象的 value 里。控制台本地定时属性，找不到按星期重复的参数 timer 是 corn 格式，包含星期重复的信息。在功能定义的服务中，“同步”与“异步”有什么区别？同步交互：指发送一个请求需要等待...
22.8版本新特性概览
读取数据时不需要按照字符串进行解析和类型转换，可直接基于JSON对象进行属性的嵌套读取。动态子列的支持大大提升了JSON类型数据的存储和查询效率。根据社区官方的测试结果，新版本JSON对比老版本String整体查询效率提升了40倍左右。示例...
字段值提取函数
JSON提取 e_json 对特定字段中的JSON对象进行JSON操作，包括JSON展开、JMES提取或者JMES提取后再展开。支持和其他函数组合使用。相关示例，请参见 复杂JSON数据加工。分隔符提取 e_csv、e_psv、e_tsv 使用自定义的分隔符与预定义的字段名，...
JSON_ARRAY
将一个可能为空的JSON类型对象，转换为包含这些类型的数组。命令格式 json json_array()参数说明 element：必填。该参数支持的类型包括STRING、BIGINT、BOOLEAN和JSON。返回值说明 返回JSON类型。使用示例-生成json array select json_...
Routine Load
只有一条记录，且为JSON对象。当使用单表导入（即通过ON TABLE_NAME指定表名）时，JSON数据格式如下。{"key1":"value1","key2":"value2","key3":"value3"} 当使用动态或多表导入Routine Load（即不指定具体的表名）时，JSON数据格式如下。...
复杂JSON数据加工
多层数组对象嵌套的复杂JSON数据加工 以一个复杂的保护多层数组嵌套的对象为示例，将 users 下的每个对象中的 login_histories 的每个登录信息都拆成一个登录事件。原始日志_source_:192.0.2.1_topic_:content:{"users":[{"name":"user1",...
数据结构
输入字符串转换成对应JSON对象的形式如下表所示：字符串 JSON对象 实际类型 1 1 整数 1.2 1.2 浮点 true True 布尔 false False 布尔"abc""abc"字符串 null None None["v1","v2","v3"]["v1","v2","v3"]列表["v1",3,4.0]["v1",3,4.0]列表 {...
JSON_OBJECT
生成json对象 select json_object('a',123);返回结果：+-+|_c0|+-+|{"a":123}|+-+示例2：包含多对key和value。生成json对象 select json_object('a',123,'b','hello');返回结果：+-+|_c0|+-+|{"a":123,"b":"hello"}|+-+相关函数 JSON_...
特定结构化数据函数
返回结果 返回转换后的JSON对象。函数示例 示例1：提取content字段的JSON值。原始日志 content:{"abc":123,"xyz":"test"} 加工规则 e_set("json",json_parse(v("content")))加工结果 content:{"abc":123,"xyz":"test"} json:{"abc":123,...
使用ROS模板选择和设置对象
资源编排支持通过新增对象数组、元素数组和参数对象对JSON数据进行扩展，增强JSON对象的校验逻辑。对象数组 对象数组为单一对象，数组元素支持所有的ROS模板参数类型。模板示例 ROSTemplateFormatVersion:'2015-09-01' Parameters:...
JSON和JSONB类型
select json_object_keys('{"f1":"abc","f2":{"f3":"a","f4":"b"}}')json_object_keys-f1 f2 jsonb_object_keys(jsonb)json_populate_record(base anyelement,from_json json)anyelement 扩展from_json中的对象成一个行，它的列匹配由base...
聚集函数
No json_object_agg(key"any",value"any")→json jsonb_object_agg(key"any",value"any")→jsonb 将所有键/值对收集到一个JSON对象中。关键参数强制转换为文本；值参数按照 to_json 或 to_jsonb 进行转换。值可以为空，但键不能（为空）。...
内建函数概述
当MaxCompute项目打开2.0新数据类型开关时，部分隐式类型转换会被禁用，包括STRING转换为BIGINT、STRING转换为DATETIME、DOUBLE转换为BIGINT、DECIMAL转换为DOUBLE、DECIMAL转换为BIGINT，都有精度损失或报错的风险。此时，您可以通过 CAST...
逻辑解码（wal2json）
RDS PostgreSQL提供wal2json插件，可以将逻辑日志文件输出为JSON格式供您查看。前提条件 实例为RDS PostgreSQL 10或以上版本。已设置实例参数wal_level=logical。详情请参见 设置实例参数。背景信息 wal2json是逻辑解码插件，使用该插件...
ST_ForceCurve
将一个Geometry对象转换为对应的Curve版本。语法 geometry ST_ForceCurve(geometry g);参数 参数名称 描述 g 目标Geometry对象。描述 转换方向：Line转换为CompoundCurve。MultiLines转换为MultiCurve。Polygon转换为CurvePolygon。...
ST_ForceCurve
将一个Geometry对象转换为对应的Curve版本。语法 geometry ST_ForceCurve(geometry g);参数 参数名称 描述 g 目标Geometry对象。描述 转换方向：Line转换为CompoundCurve。MultiLines转换为MultiCurve。Polygon转换为CurvePolygon。...
ST_ForceCurve
将一个Geometry对象转换为对应的Curve版本。语法 geometry ST_ForceCurve(geometry g);参数 参数名称 描述 g 目标Geometry对象。描述 转换方向：Line转换为CompoundCurve。MultiLines转换为MultiCurve。Polygon转换为CurvePolygon。...
接收消息通知
定义：[活动对象1，活动对象2，.]"ActivityList":[/活动对象：JSON对象，定义：{活动名称，活动类型，作业ID，活动状态，开始时间，结束时间，错误信息（如有）} {"RunId":"8f8aba5a62ab4127ae2add18da20*","Name":"Act-1","Type":"Start",...
逻辑解码（wal2json）
PolarDB PostgreSQL版（兼容Oracle）提供wal2json插件，可以将逻辑日志文件输出为JSON格式。背景信息 wal2json是逻辑解码插件，具体功能如下：可以访问由 INSERT 和 UPDATE 生成的元组。根据配置的副本身份，可以访问 UPDATE 和 DELETE 旧...
逻辑解码（wal2json）
PolarDB PostgreSQL版（兼容Oracle）提供wal2json插件，可以将逻辑日志文件输出为JSON格式。背景信息 wal2json是逻辑解码插件，具体功能如下：可以访问由 INSERT 和 UPDATE 生成的元组。根据配置的副本身份，可以访问 UPDATE 和 DELETE 旧...
逻辑解码（wal2json）
PolarDB PostgreSQL版 提供wal2json插件，可以将逻辑日志文件输出为JSON格式。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 14（内核小版本14.5.1.0及以上）PostgreSQL 11（内核小版本1.1.29及以上）说明 您可通过如下...
DBMS_LOB
CONVERTOBLOB(dest_lob IN OUT,src_clob,amount,dest_offset IN OUT,src_offset IN OUT,blob_csid,lang_context IN OUT,warning OUT)存储过程 N/A 将字符类型数据的大对象，转换成二进制类型数据的大对象。CONVERTTOCLOB(dest_lob IN OUT,...
CAST函数
输入值类型 DECIMAL(m,d)、FLOAT、INT/INTEGER、SMALLINT、TINYINT BIGINT DOUBLE VARCHAR JSON 转换规则 原数据类型 目标数据类型 转换规则 VARCHAR JSON BOOLEAN 原数据为true或1，会被转换成1。原数据为false或0，会被转换成0。原数据为...
半结构化分析
其中，JSON数据类型直接存储输入文本，会保存JSON数据中语义无关的空格，并且会保持JSON对象键的顺序，以及JSON数据中重复的键和键对应的数据。对于重复键在查询的时候会将最后一个遇到键的值当作有效值。JSONB数据类型则是以二进制格式来...
cjson
args description array 数组类型的JSON结构体 index 数组成员索引 获取JSON对象成员 cJSON*cJSON_GetObjectItemCaseSensitive(const cJSON*const object,const char*const string);args description object 对象类型的JSON结构体 string ...
RestAPI（HTTP形式）数据源
是 无 dataPath 从返回结果中查询单个JSON对象或者JSON数组的路径。否 无 method 请求方法，支持get或post两种方式。是 无 customHeader 传递给RESTful接口的header信息。否 无 parameters 传递给RESTful接口的参数信息。get方法填入 abc=1...
数据格式描述文件
{"dataSchema":{.},"ioConfig":{.},"tuningConfig":{.} } 键 格式 描述 是否必须 dataSchema JSON对象 待消费数据的schema信息。dataSchema是固定的，不随数据消费方式改变。是 ioConfig JSON对象 待消费数据的来源和消费去向。数据消费...
OSS数据导入MaxCompute表
OSS中的数据文件（JSONL格式，示例）需要符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 MaxCompute 配置组件 在Designer工作流页面添加 OSS数据导入MaxCompute表 组件，并...
LLM-MD5去重（DLC）
输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 DLC 算法说明 对所有输入的文本数据使用 hashlib.md5 哈希算法计算哈希值。哈希值...
LLM-敏感词过滤（DLC）
输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 DLC 算法说明 识别文本中是否包含敏感词，过滤掉包含敏感词的样本。支持返回文本中...
LLM-特殊内容移除（DLC）
输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 DLC 算法说明 LLM-特殊内容移除组件支持以下功能：去除URL链接 删除文本中匹配正则...
LLM-计数过滤（DLC）
输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 DLC 算法说明 LLM-计数过滤组件支持以下功能：根据数字和字母字符比例过滤 统计文本...
MaxCompute表导入OSS
表中的每一行数据导出为一个合法的JSON对象，导出文件（JSONL格式，示例）由多行JSON对象组成，整个文件本身不是合法的JSON对象。数据量大时可能会被切分为多个文件。支持的 计算资源 MaxCompute 配置组件 在Designer工作流页面添加 ...
LLM-长度过滤（DLC）
输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 DLC 配置组件 在Designer工作流页面添加 LLM-长度过滤（DLC）组件，并在界面右侧...
LinUcb训练任务配置
MaxCompute支持用这两种字符解析JSON对象，当JSON的Key本身包含.时，可以用['']来替代。[]：[number]表示数组下标，从0开始。Wildcard for[]，返回整个数组。不支持转义。示例：假设某条日志的内容为 {"store":{"fruit":[{"weight":8,"type...
- 产品推荐
- 这些文档可能帮助您