扩展字段
可编辑：用户可以对自己在该字段中的值进行查看和编辑。可编辑。填写扩展字段 创建完新字段，确保字段处于启用状态后，即可使用。管理员可以来到【账户与组织】菜单，点击【创建账户】按钮。在弹出的表单上方，即可切换到【扩展字段】标签...
JSON_EXISTS
使用示例 示例1：从JSON中查询key为a的value值是否存在。select json_exists(json '{"a":1,"b":2}','$.a');返回结果：+-+|_c0|+-+|true|+-+示例2：从JSON中查询key为c的value值是否存在。select json_exists(json '[1,2,{"a":34}]','$[2].a...
错误码映射插件
2.快速开始 请先参考下面的例子，某后端的返回中，HTTP应答码为200,但错误信息包含在包体中JSON字段中。HTTP 200 OK Content-Type:application/json {"req_msg_id":"d02afa56394f4588832bed46614e1772","result_code":"ROLE_NOT_EXISTS"} ...
JSON格式导入
其中JSON Path的作用是将JSON数据按照JSON Path中字段的顺序进行抽取，之后会按照表结构的顺序进行写入。最终导入的数据结果如下：+-+-+|k1|k2|+-+-+|2|1|+-+-+实际的k1列导入了JSON数据中的k2列的值。因为JSON中字段名称并不等同于表结构...
管理敏感数据
说明 开通敏感数据管理功能后，即可查看当前实例中的数据库相关信息和数据库中敏感字段的扫描结果。根据扫描出来的信息，您可以单击 前往DMS使用敏感数据保护 前往DMS数据管理服务控制台对敏感数据执行管控操作。更多信息，请参见 管理敏感...
从RDS MySQL数据库获取数据进行数据富化
rds_mysql(address="rds-host",username="mysql-username",password="xxx",database="xxx",table="xx",refresh_interval=60),"content","name")多行匹配 遍历RDS MySQL数据库表中的所有数据行，将匹配到的数据全部添加到指定字段中。...
数据类型
content:{ remote_addr:"192.0.2.0"request:{ request_length:"73"request_method:"GE 更多参考信息 关于查询和分析JSON日志的更多操作场景和常见问题，包括设置索引、查询和分析具有索引的JSON字段、使用JSON函数、分析JSON数组等，请参见...
数据接口配置说明
操作 说明 编辑字段基本信息 每一个数据字段中包含多个字段参数内容，您可以自定义编辑字段的参数内容。字段名：输入数据字段的英文名称，字段名称必须为英文字符，作为参数传递时的key值。中文名：输入字段的中文名，中文名必须控制在10字...
JSON数据类型
Lindorm宽表引擎支持在建表、插入数据和更新数据时使用JSON数据类型。JSON（JavaScriptObject Notation）是一种可以在多种语言之间进行数据格式交换的数据类型。JSON数据的格式为键值对，结构清晰，语法易读，同时也方便前后端的数据传输。...
控制台错误日志说明
本文主要介绍OpenSearch行业算法版和高性能检索版控制台各类错误日志的使用场景以及触发条件。索引重建错误 编号 含义 触发条件 7500 系统错误-7601 定时任务执行失败 定时...字符串拼接插件 字符串拼接插件涉及的字段中配置了array类型的字段
控制台错误日志说明
本文主要介绍OpenSearch行业算法版和高性能检索版控制台各类错误日志的使用场景以及触发条件。索引重建错误 编号 含义 触发条件 7500 系统错误-7601 定时任务执行失败 定时...字符串拼接插件 字符串拼接插件涉及的字段中配置了array类型的字段
快速入门
查询数据 在sample_template.json中设置查询参数，使用示例代码默认的查询范围。{"operation":"READER","zk_address":$your_zk_address,"catalog":"example","schema":"ship"} 也可设置查询语句filter_string，指定查询范围。{"operation":...
ORDER BY子句
分析语句中的JSON字段名称必须使用双引号（""）包裹，例如"content.time.request_time。查询和分析语句*|SELECT"content.time.request_time",count(*)AS count GROUP BY"content.time.request_time"ORDER BY"content.time.request_time...
JSON函数
json_path_string 指定的数据，可以通过 array[json_path_string]一次性指定多个 json_path_string。返回值类型 VARCHAR（JSON格式的字符串）示例 select json_reserve('{"glossary":{"title":"example glossary","GlossDiv":{"title":"S",...
代码示例
java-jar target/lindorm-mod-sample-1.0.0.jar src/main/resources/template/mod_template.json 2.2 查询数据 在mod_template.json中设置查询参数，使用示例代码默认的查询范围。{"operation":"QUERY","zk_address":"your_zk_address",...
JSON_EXTRACT
解析JSON表达式中对应json_path的数据，注意json_path非法时会报错。命令格式 json json_extract(<json>,<json_path>)参数说明 json：必填，待处理的JSON。json_path：必填，需要返回的值的JSON路径。返回值说明 返回JSON类型。使用示例 ...
配置Hologres输出组件
使用限制 不支持写入Hologres数据库的视图。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。在离线单条管道脚本的开发页面，按照下图操作指引，进入 Hologres输出配置 对话框。在 Hologres输出配置 对话框，配置...
为什么未创建索引的JSON子字段会产生索引流量？
计算规则 JSON字段的索引流量计算规则如下：如果未对子节点设置索引，则其索引流量按照text类型进行计算。如果对子节点设置了索引，则其索引流量按照其子节点的数据类型（text类型、long类型或double类型）进行计算。更多信息，请参见 索引...
配置ClickHouse输出组件
ClickHouse输出组件用于向ClickHouse数据源写入数据。同步其他数据源的数据至ClickHouse数据源的场景中，完成源数据的信息配置后，需要...例如，endpoint_type 字段对应的数据映射至 id 字段中。单击 确认，完成ClickHouse输出组件的配置。
数据标准概述
DataWorks数据建模支持在建模前规划制定数据标准，或在建模使用过程中根据业务情况沉淀企业业务的数据标准。通过规范约束标准代码、度量单位、字段标准、命名词典，来保障后续建模与应用过程中数据处理的一致性，从源头上保障数据的标准化...
配置ClickHouse输出组件
例如，endpoint_type 字段对应的数据映射至 id 字段中。单击 确认，完成ClickHouse输出组件的配置。后续步骤 完成输出组件的配置后，即可配置离线单条管道的容错、并发度及内存等参数。具体操作，请参见 通过离线单条管道配置集成任务。
手动新建逻辑表
通过手动新建逻辑表，建立您期望的数据表样式和字段，并支持将逻辑表物理化至云计算资源中，为后续...说明 删除逻辑表不会同时删除数据库中已生成的物理表。后续步骤 创建完逻辑表以后，需要将逻辑表物理化，更多信息，请参见 物理化逻辑表。
查看敏感数据血缘（公测）
DataWorks的数据血缘功能支持可视化展示敏感数据的血缘关系，自动分析字段之间的异常关联关系、敏感数据识别结果异常的字段，帮助您梳理敏感数据的扩散情况及影响面，提高数据识别效率。本文为您介绍如何查看血缘关系图。背景信息 数据血缘...
手动新建逻辑表
通过手动新建逻辑表，建立您期望的数据表样式和字段，并支持将逻辑表物理化至云计算资源中，为后续...说明 删除逻辑表不会同时删除数据库中已生成的物理表。后续步骤 创建完逻辑表以后，需要将逻辑表物理化，更多信息，请参见 物理化逻辑表。
ACS:Notify:DingTalkWebhook
语法 Action:ACS:Notify:DingTalkWebhook Properties:webhook:String msgtype:String text:Json link:Json markdown:Json at:Json 属性 属性名称 描述 类型 是否必填 默认值 约束 webhook DingTalk webhook来通知 String 是 msgtype 消息...
在RDS PostgreSQL9.4版本中如何增加JSON字段元素
概述 本文主要介绍在RDS PostgreSQL9.4版本中，如何在JSON字段增加元素。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行...
ACS:Approve:DingTalkWebhook
语法 Action:ACS:Approve:DingTalkWebhook Properties:webhook:String msgtype:String text:Json link:Json markdown:Json at:Json 属性 属性名称 描述 类型 是否必填 默认值 约束 webhook DingTalk webhook来通知 String 是 msgtype 消息...
配置Oracle输出组件
Oracle输出组件用于向Oracle数据源写入数据。同步其他数据源的数据至Oracle数据源的场景中，完成源数据的信息配置后，需要配置Oracle输出组件...例如，endpoint_type 字段对应的数据映射至 id 字段中。单击 确认，完成 Oracle输出组件 配置。
配置Oracle输出组件
Oracle输出组件用于向Oracle数据源写入数据。同步其他数据源的数据至Oracle数据源的场景中，完成源数据的信息配置后，需要配置Oracle输出组件...例如，endpoint_type 字段对应的数据映射至 id 字段中。单击 确认，完成 Oracle输出组件 配置。
配置AnalyticDB for PostgreSQL输出组件
AnalyticDB for PostgreSQL输出组件用于向AnalyticDB for PostgreSQL数据源写入数据。同步其他数据源的数据至AnalyticDB ...例如，endpoint_type 字段对应的数据映射至 id 字段中。单击 确认，完成AnalyticDB for PostgreSQL输出组件的配置。
自定义开发组件蓝图说明
在当前 render 字段中自定义设置 导入数据接口 动作代码逻辑。说明 动作逻辑都可自定义多个，自定义设置越多，蓝图编辑器节点页面显示动作越多。添加交互动作 在自定义组件中实现蓝图编辑器中多个交互动作，以数字翻牌器组件的 显示 和 ...
配置MaxCompute输出组件
MaxCompute输出组件用于向MaxCompute数据源写入数据。同步其他数据源的数据至MaxCompute数据源的场景中，完成源数据源的信息配置后...例如，endpoint_type 字段对应的数据映射至 id 字段中。单击 确认，完成 MaxCompute 输出组件的属性配置。
配置MaxCompute输出组件
MaxCompute输出组件用于向MaxCompute数据源写入数据。同步其他数据源的数据至MaxCompute数据源的场景中，完成源数据源的信息配置后...例如，endpoint_type 字段对应的数据映射至 id 字段中。单击 确认，完成 MaxCompute 输出组件的属性配置。
管理元数据
编辑元数据 重要 必填字段 中第一个必填字段不允许编辑。系统元数据不支持编辑操作。在 元数据注册 页面，单击需要编辑元数据所在行 操作 列下的 图标。在 编辑元数据 对话框提示，只支持字段的增删操作，其他参数不可编辑。添加元数据的...
管理元数据
编辑元数据 重要 必填字段 中第一个必填字段不允许编辑。系统元数据不支持编辑操作。在 元数据注册 页面，单击需要编辑元数据所在行 操作 列下的 图标。在 编辑元数据 对话框提示，只支持字段的增删操作，其他参数不可编辑。添加元数据的...
配置AnalyticDB for PostgreSQL输出组件
例如，endpoint_type 字段对应的数据映射至 id 字段中。单击 确认，完成AnalyticDB for PostgreSQL输出组件的配置。后续步骤 完成输出组件的配置后，即可配置离线单条管道的调度参数。具体操作，请参见 通过离线单条管道配置集成任务。
数据接口配置说明
操作 说明 编辑字段基本信息 每一个数据字段中包含多个字段参数内容，您可以自定义编辑字段的参数内容。字段名：输入数据字段的英文名称，字段名称必须为英文字符，作为参数传递时的key值。中文名：输入字段的中文名，中文名必须控制在10字...
如何使用蓝图编辑器自定义开发组件
在当前 render 字段中自定义设置 导入数据接口 动作代码逻辑。说明 动作逻辑都可自定义多个，自定义设置越多，蓝图编辑器节点页面显示动作越多。添加交互动作 在自定义组件中实现蓝图编辑器中多个交互动作，以数字翻牌器组件的 显示 和 ...
数据脱敏
在数据集中设置需要脱敏的字段，系统将该字段中的敏感数据进行模糊化处理，使得该字段在仪表板、电子表格或自助取数中以脱敏的形式展示，保护数据安全。前提条件 已创建数据集，请参见 创建并管理数据集。脱敏规则及效果展示 说明 本文档仅...
索引、属性、字段作用详解
通俗说就是数据库的名字 字段 在es中索引创建完了之后，是类型，类型之后，是字段 通俗说就是某个表里面的属性的名称 属性 字段的类型（string、int、double.）字段的类型（string、int、double.）OpenSearch：名词 OpenSearch解释 与关系...
- 产品推荐
- 这些文档可能帮助您