通过Logstash实现多字段数据整合
本文介绍如何通过logstash-filter-mutate插件实现多字段合并。背景信息 logstash-filter-mutate插件支持对事件中的字段进行重命名、删除、替换和修改操作。配置文件中的mutate按照下表中的顺序执行，详细信息请参见 Mutate filter plugin。...
Dataphin单独查询保留字列名称...多字段查询的时候报错
问题描述 Dataphin单独查询保留字列名称字段添加反引号没有异常，多字段查询的时候报错。问题原因 查询的其他字段依然含有关键字导致报错。解决方案 使用反引号将其他所有使用关键字的列名称引用起来正常执行。适用于 Dataphin 当前环境：...
Dataphin的管道同步任务中如何配置多分区值和多分区...
问题描述 Dataphin的管道同步任务中如何配置使用多分区值和多分区字段来进行数据同步？解决方案 配置使用多分区和多分区字段的方法示例参考（数据源是Maxcompute）：/*query*/sale_date>=20190311 and sale_date适用于 Dataphin 基于公共云...
QuickBI为什么有的度量字段选择更多聚合方式下拉中有...
概述 本文主要介绍度量字段选择更多聚合方式下拉中有“中位数”选项，有的字段没有该选项的原因。详细信息 什么情况下，点击度量下拉，在更多聚合方式中会有“中位数”的选项？介绍如下：当数据源为SAP IQ（Sybase IQ）、Oracle、...
Quick BI仪表板图表在添加多个维度字段后，同环比不...
问题描述 Quick BI仪表板图表在添加多个维度字段后，同环比不显示。解决方案 同环比的条件是需要除了日期外的所有维度字段数据都相同，才会进行下一步的同环比数据对比。适用于 Quick BI 适用于v4.4及以下版本
Quick BI百分百柱状堆积图配置多个度量字段会自动总计...
概述 本文主要描述了Quick BI百分百柱状堆积图配置多个度量字段会自动总计，如何取消自动总计的操作方法。详细信息 在仪表板的样式里开启显示双Y轴，然后开启指标筛选展示，选择至少两个度量字段，但是不要全选度量字段，然后点击确定。...
Quick BI数据集过滤数字字段，如果选取多个值过滤？
概述 本文主要介绍数据集过滤数字字段，选取多个值过滤的方法。详细信息 数据集过滤数字字段，界面只能选取两个条件，如何选取多个值过滤呢？方法如下：将该数字字段转换为文字类型。过滤该字段，选择按枚举过滤-多选即可。适用于 Quick BI...
Quick BI数据填报的数据管理页面多出的ID字段是怎么...
问题描述 Quick BI数据填报的数据管理页面多出的ID字段是怎么产生的？问题原因 组件配置中勾选了‘自动关联字段ID值’，所以会自动生成对应的ID字段。解决方案 如果不需要自动关联的ID字段，可以去除勾选‘自动关联字段ID值’的设置项，...
Quick BI同一个查询控件关联多个图表中的同名字段时...
概述 描述同一个查询控件关联多个图表中的同名字段时，选项值来源设置方法。详细信息 当同一个查询控件关联多个图表中的同名字段时，配置选项值来源选择自动解析即可。适用于 Quick BI
Dataphin公有云多租户环境升级到3.7版本之后，提交...
问题描述 Dataphin公有云多租户环境升级到3.7版本之后，提交之前已经存在的逻辑表报错“字段类型String与计算逻辑的类型Double不一致”。问题原因 3.7版本之后有做字段类型的强校验，比如逻辑表字段类型是 Double,但来源表中字段类型实际是...
ORDER BY
SELECT nid,brand,price,size FROM phone ORDER BY price ASC LIMIT 1000 多字段排序：SELECT nid,brand,price,size FROM phone ORDER BY size DESC,price DESC LIMIT 1000 返回价格排序后第11到第20名的结果：SELECT nid,brand,price,size...
多元索引路由字段的使用
使用流程 创建索引时，指定一个或多个路由字段。您在创建多元索引时指定了路由字段后，索引数据的读写都会使用该路由字段进行定位。多元索引的路由键支持动态改变。如果想使用系统默认路由（即主键列路由）或者重新指定其他字段为路由字段...
概述
这里字段比较少可能还不觉得什么，实际业务里面表的字段往往都是几十上百个字段，让用户手动敲这么多字段定义是非常耗时的。而有了Create Table Like Mapping的语法，这个工作量可以大大减少,它的语法如下：create external table dla_...
基本概念
名称 描述 Trajectory Point 轨迹点，是由移动对象在某个时刻所在的空间位置与附带的属性值组成的时空对象，其中空间位置支持二维坐标或三维坐标，属性支持多字段多类型。Trajectory Object 轨迹对象，是由一系列轨迹点、轨迹事件组成的含...
索引、属性、字段作用详解
字段：字段的用法就很简单，通过索引和属性召回的doc（类似于数据库的一条记录）中，每一条doc都有很多字段。字段另一个用法就是需要与数据源的字段进行映射，因为字段是OpenSearch里定义的，所以如果需要通过数据源导入数据到OpenSearch的...
索引、属性、字段作用详解
字段：字段的用法就很简单，通过索引和属性召回的doc（类似于数据库的一条记录）中，每一条doc都有很多字段。字段另一个用法就是需要与数据源的字段进行映射，因为字段是OpenSearch里定义的，所以如果需要通过数据源导入数据到OpenSearch的...
绑定钉钉-出方向
更多字段映射的说明请查看文档 字段映射。如果确认字段映射的配置准确，可以选择【保持，且立即同步】，此时将执行一次全量同步，将第三步所选的 IDaaS 数据同步到钉钉；如果您暂不确定字段映射的配置是否准确，可以选择【仅保持，暂不同步...
配置数据计算和数据过滤
（可选）重复上一步，新增更多字段。如需使用数据计算节点中的新增字段，继续生产新数据，可继续参照上述步骤，配置多个表达式。单击数据解析工作台右上角的 保存，完成数据计算节点的配置。配置数据过滤 您可以配置数据过滤，进一步筛选...
GetMetaTableColumn-获取表的字段信息
has_promotion SecurityLevel string 字段的安全级别，返回值说明如下：INNER：内部（非敏感）SENSITIVE：敏感 CONFIDENTIAL：机密 说明 更多字段的安全信息，请参见 字段安全等级。INNER PrimaryKey string 字段是否为主键，返回值说明...
增值内容函数
更多字段详情请参见 字段提取检查与覆盖模式。返回结果 返回的威胁情报信息以JSON格式输出到 output_field 定义的字段中，其各参数说明如下表。IP地址威胁情报返回结果 参数 说明 confidence 威胁情报数据置信度，取值范围为[0,100]之间的...
字段值提取函数
关于更多字段值及含义请参见 字段提取检查与覆盖模式。pack_json String 否 将正则表达式的所有匹配结果打包放入pack_json指定的字段中。默认值是None，表示不打包。返回结果 返回附带新字段值的日志。函数示例 示例1：提取字段中符合表达...
映射富化函数
原始日志 data:123 city:nj pop:800 加工规则 e_table_map(tab_parse_csv("city,pop,province nj,800,js sh,2000,sh"),["city","pop"],"province",)加工结果 data:123 city:nj pop:800 province:js 示例8：多个日志匹配字段，且日志匹配...
配置Kafka输入
输出字段 您可以自定义Kafka数据对外输出的字段名：单击 添加更多字段，输入 字段名，并选择 类型，即可新增自定义字段。取值方式 支持从kafka记录中取得字段值的方式，单击右侧 按钮可以在两类取值方式间切换。预置取值方式：提供6种可选...
仪表板制作常见问题
数据集中很多字段不需要，是否支持批量隐藏？是否支持根据输入的值进行查询，不要下拉列表？选择格式为“自动适配”后，小数点位数要如何设置？查询出来的字段如何设置排序？同一个报表的度量是否支持切换不同的维度查看吗？例如我可以切换...
查询及分析日志
查询多字段 查询指定客户端 192.XX.XX.22 访问目的地址 192.XX.XX.54 的访问日志。src_ip:192.XX.XX.22 and dst_ip:192.XX.XX.54 查询字段是否存在 查询包含 cloud_instance_id 字段的日志。cloud_instance_id:*查询不包含 cloud_instance_...
配置DataWorks平台GDB Writer
{0}-#{1} 表示进行多字段拼接，也可以在任意位置添加固定字符串，例如 test-#{0}-test1-#{1}-test2 是 无 column:columnType 点或边字段映射关系配置 columnType 字段。点或边字段映射字段的分类，支持以下枚举值：primaryKey 表示该字段...
API
} 参数：字段 类型 含义 备注 propValue PackMultiAttrSchemaDataWith,Config>|MultiAttrSchemaDataWith实体模型数据数组或者带包装字段的实体模型数据数组 参见 MultiAttrSchemaDataWith PackMultiAttrSchemaDataWith 返回值：...
列存索引
column_name(,.))需要创建列存索引的字段列表，多个字段用英文逗号（,）分隔。目前支持创建列存索引的字段类型包括：TINYINT、SMALLINT、INTEGER、BIGINT、LONG、FLOAT、DOUBLE、VARCHAR、BINARY、VARBINARY、BOOLEAN。说明 该字段列表必须...
Graph Database（GDB）数据源
{"properties":[{"k":"name","t":"string","v":"tom"},{"k":"sex","t":"string","v":"male"}]} 边不支持多值属性，无 c 字段。是 无 Writer脚本Demo 点配置示例 {"order":{"hops":[{"from":"Reader","to":"Writer"}]},"setting":{...
附录：消息格式
本文介绍DataWorks开放消息的消息结构、不同类型事件的消息格式及各字段含义，帮助您快速获取和感知事件消息的状态变更信息。注意事项 DataWorks发送的核心消息内容您可参照消息实体格式进行查看。通过EventBridge发送的消息，会在消息实体...
Quick BI数据集支持字段数量上限是多少
概述 本文描述了Quick BI数据集支持字段数量上限是多少。详细信息 数据集支持字段数量最大为1000个。适用于 Quick BI 公共云
AND
对多个字段取与处理，支持“true”、“false”、“1”、“0”值的字段。计算逻辑原理 对多个字段值取逻辑与。使用流程说明 组件拖入画布后，将输入端口与其他组件的输出端口连接，将输出端口与其他组件的输入端口连接，从IN端口选择N个字段...
OR
OR算法组件对多个字段取或处理，支持“true”、“false”、“1”、“0”值的字段。计算逻辑原理 对多个字段值取逻辑或。使用流程说明 组件拖入画布后，将输入端口与其他组件的输出端口连接，将输出端口与其他组件的输入端口连接，从IN端口...
其它检查（随录参数检查）
（二）更多自定义字段：即大JSON传过来的字段。配置方法：选择系统常规字段或更多自定义字段，然后选择并输入对应的参数即可。使用示例：某销售公司，针对于不同的地域要求使用的销售话术不同。比如对华南、华东区域检测销售话术A；针对于...
全局操作函数概览
e_split 基于日志字段的值分裂出多条日志，并且支持通过JMES提取字段后再进行分裂。e_output 输出日志到指定的Logstore中，且对应的日志不再执行后面的加工规则。e_coutput 输出日志到指定的Logstore中，且对应的日志继续执行后面的加工...
Quick BI数据集对字段进行排序没有生效
概述 本文主要解决Quick ...原因是多个字段进行排序，该字段不是第一个排序字段，导致该字段看不是按顺序排序的，可以将其他排序字段去掉，或者后添加其他排序字段。适用于 Quick BI 说明：本文是基于Quick BI公共云专业版4.2.3版本进行验证。
使用介绍
rankTvf rankTvf 主要是为了提供类sql窗口函数rank的功能，用于打散后过滤，其原型如下：rankTvf("group_key","sort_key","reserved_count",(sql))group_key:用于打散的字段，支持多个字段，使用,分隔，group_key可以为空。sort_key：用于...
日志字段详情
日志字段解析 一条消息操作日志中包含多个字段，各个字段的含义如下：字段 含义 Time 本次操作的发生时间。MessageId 消息的MessageId，标识本次操作处理的消息。QueueName 本次操作对应的队列名称。AccountId 本次操作对应队列的账号。...
行级权限设置
若指定多个字段，则被授权的行同时满足多个字段的取值要求。说明 对用户授权行级权限前，需要先授权管理权限或使用权限，否则无权使用数据集任何数据。用户只有先获得管理权限或使用权限，再获得行级权限，才能使用筛选出的行数据。若某...
自定义字段
您不仅可以 在项目中配置自定义字段，还可以在管理后台中直接管理当前企业使用的所有自定义字段。二者的区别： 当你在...覆盖字段：文本字段、数字字段、单选字段、多选字段 配置完成后，创建任务时该字段将被默认填入设置的默认值内容。
- 产品推荐
- 这些文档可能帮助您