Quick BI交叉表中怎样对文本字段去重计数
概述 Quick BI交叉表中怎样对文本字段去重计数。详细信息 1.维度字段不支持去重计数。当需要去重计数的字段是维度的时候，需要将该字段在数据集编辑页转换为度量字段，或者可以新建字段，字段表达式选择需要去重计数的字段，数据类型选择...
数据去重
适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 是 使用说明 选择去重字段 选择需要去重的字段，选中的字段将作为该算子的输出字段，数据中若包含多条重复记录则仅保留第一条数据。
算子功能详解
Trigger组件“Trigger组件”是“Recall召回”组件的前置组件，获取召回表的...去重字段：单选，Recall 组件返回字段+前面所有Join组件返回字段。插件参数：设置Sorter排序标识，可通过Query params设定一致的标识内容，进行不同的排序逻辑。
集成Open-Falcon
ARMS告警管理支持预览 事件映射 区域中的历史事件数据的去重分组结果，您可根据需要调整去重字段。说明 事件去重仅针对未恢复状态下的事件。在 编辑集成 页面的 事件去重 区域选择需要去重的字段。当选择的字段的值相同时，对应的多个事件...
集成Skywalking
ARMS告警管理支持预览 事件映射 区域中的历史事件数据的去重分组结果，您可根据需要调整去重字段。说明 事件去重仅针对未恢复状态下的事件。在 编辑集成 页面的 事件去重 区域选择需要去重的字段。当选择的字段的值相同时，对应的多个事件...
集成Grafana告警
ARMS告警管理支持预览 事件映射 区域中的历史事件数据的去重分组结果，您可根据需要调整去重字段。说明 事件去重仅针对未恢复状态下的事件。在 编辑集成 页面的 事件去重 区域选择需要去重的字段。当选择的字段的值相同时，对应的多个事件...
集成日志服务告警
ARMS告警管理支持预览 事件映射 区域中的历史事件数据的去重分组结果，您可根据需要调整去重字段。说明 事件去重仅针对未恢复状态下的事件。在 编辑集成 页面的 事件去重 区域选择需要去重的字段。当选择的字段的值相同时，对应的多个事件...
集成云监控告警
ARMS告警管理支持预览 事件映射 区域中的历史事件数据的去重分组结果，您可根据需要调整去重字段。说明 事件去重仅针对未恢复状态下的事件。在 编辑集成 页面的 事件去重 区域选择需要去重的字段。当选择的字段的值相同时，对应的多个事件...
集成Zabbix
ARMS告警管理支持预览 事件映射 区域中的历史事件数据的去重分组结果，您可根据需要调整去重字段。说明 事件去重仅针对未恢复状态下的事件。在 编辑集成 页面的 事件去重 区域选择需要去重的字段。当选择的字段的值相同时，对应的多个事件...
通过自定义集成方式接入告警
ARMS告警管理支持预览 事件映射 区域中的历史事件数据的去重分组结果，您可根据需要调整去重字段。说明 事件去重仅针对未恢复状态下的事件。在 事件去重 区域选择需要去重的字段。当选择的字段的值相同时，对应的多个事件将会合并为一个告...
集成自建Prometheus告警
ARMS告警管理支持预览 事件映射 区域中的历史事件数据的去重分组结果，您可根据需要调整去重字段。说明 事件去重仅针对未恢复状态下的事件。在 编辑集成 页面的 事件去重 区域选择需要去重的字段。当选择的字段的值相同时，对应的多个事件...
集成Nagios
ARMS告警管理支持预览 事件映射 区域中的历史事件数据的去重分组结果，您可根据需要调整去重字段。说明 事件去重仅针对未恢复状态下的事件。在 编辑集成 页面的 事件去重 区域选择需要去重的字段。当选择的字段的值相同时，对应的多个事件...
数据表管理
更新从数据库导入的数据表 字段同步 当数据库中新增或删除有关列的字段后，通过 同步字段 功能，系统会自动检测数据库中的字段变更内容，并可根据实际业务需求选择是否对有关元数据做字段变更同步。具体操作如下：选择 知识中心>数据问答>...
Quick BI维度或度量字段如何重命名
问题描述 根据业务需求在报表显示的字段要重命名，但是不知道如何对仪表板中的度量字段进行重命名为自定义的别名？问题原因 没有找到字段重命名的功能按钮，也可以使用新建计算字段来对原有字段重命名。解决方案 1.进入仪表板编辑页面，在...
库表
AnalyticDB MySQL 是分布式数据库，数据需要根据分布字段均匀地分布在各个后台节点才能保证尽可能高的利用资源。分布字段选择不合理，会导致写入时存在热点，降低写入性能。分区字段合理性。AnalyticDB MySQL 后台以分区为粒度进行数据存储...
数据建模
数据唯一性 表分区所选字段值去重后的count数与表分区总记录数的比率与一个固定值进行比较，符合规则则通过。比较方式包括：>、、>=、、=和!字段规则说明：配置项 说明 最大值 对应分区，该字段的最大值与期望的固定值进行比较，符合规则则...
权限常见问题
某字段设置为使用标签控制行级权限的字段，如何表示这个字段里的空值呢？每个城市的业绩在同一个报表中，能否发送给各个城市的人，这些人只看他们自己的城市业绩？授权账号最小权限是什么，才可以使用上传文件功能？如何管理组织权限？高级...
MongoDB数据导入
查询ObjectId字段 示例数据 在数据库 test_mongodb 中创建名为 test_objectid 的集合，示例如下：db.createCollection("test_objectid");向 test_objectid 集合中插入文档，示例如下：db.test_objectid.insert({ 'id':1,})查询 test_...
配置MaxCompute输出组件
同步其他数据源的数据至MaxCompute数据源的场景中，完成源数据源的信息配置后，需要配置MaxCompute输出组件写入数据到目标数据源。本文为您介绍如何配置MaxCompute输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的...
配置MaxCompute输出组件
同步其他数据源的数据至MaxCompute数据源的场景中，完成源数据源的信息配置后，需要配置MaxCompute输出组件写入数据到目标数据源。本文为您介绍如何配置MaxCompute输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的...
离线同步能力说明
数据集成的离线同步功能为您提供数据读取（Reader）和写入插件（Writer），方便您通过定义来源与去向数据源，并结合DataWorks调度参数使用，将源端数据库中全量或增量数据的同步至目标数据库中。本文为您介绍离线同步的相关能力。使用限制 ...
重命名字段
您在使用Logtail采集日志时，可以使用processor_rename插件重命名字段。本文介绍processor_rename插件的参数说明和配置示例。重要 表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口 当您...
Quick BI电子表格中字段如何重命名
概述 Quick BI电子表格中如何给字段重命名。详细信息 1.选中需要重命名的字段，点击更多。2.点击重命名。3.输入需要修改的名称。4.完成字段重命名。适用于 Quick BI
管理敏感数据
页面介绍 元数据信息汇总：可查看实例中数据库相关信息，包括 数据库数量、已扫描的 表数量、已扫描的 字段数量 以及 涉敏字段数量。涉敏字段-法案分布：可查看数据库中的敏感字段涉及哪些法案或政策，以及相关敏感字段的数量和分布情况。...
事件操作函数
原始日志_topic_:db_name:db-01 db_version:5.6_topic_:db_name:db-02 db_version:5.7 加工规则 e_output(name="target1",hash_key_field="db_version")加工结果#假设存储目标target1一共有2个Shard。Shard 0的范围...
合作数据管理
添加数据至合作空间 在DataTrust首页，单击顶部菜单栏的 通用计算。进入 合作数据 页面。按照下图指引，进入 添加数据 对话框。在 添加数据 对话框中，配置参数。参数 描述 数据名称 选择已创建的数据。数据别名 可根据已选数据创建别名。...
数据集成服务
当您的现有业务对数据库的并发读写、扩展性和可用性的要求较高，且需要使用复杂的检索或大数据分析时，如果原有数据库的数据架构不能满足现在的业务需求或改造成本较大，则您可以通过DataWorks数据集成服务将现有数据库中的数据迁移到...
识别规则及识别方式
说明 自动继承开启后，下游会根据字段血缘关系自动继承直接上游字段的敏感等级，同时根据默认脱敏规则的配置，以实现对新增数据的自动保护，减少手动配置成本，也能更大程度上保证关联数据识别结果一致性和相关性。继承场景 支持选择 识别...
配置Teradata输出组件
使用限制 不支持写入Teradata数据库的视图。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。在离线单条管道脚本的开发页面，按照如下图操作指引，进入 Teradata输出配置 对话框。在 Teradata输出配置 对话框，...
配置Teradata输出组件
使用限制 不支持写入Teradata数据库的视图。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。在离线单条管道脚本的开发页面，按照如下图操作指引，进入 Teradata输出配置 对话框。在 Teradata输出配置 对话框，...
识别规则及识别方式
说明 自动继承开启后，下游会根据字段血缘关系自动继承直接上游字段的敏感等级，同时根据默认脱敏规则的配置，以实现对新增数据的自动保护，减少手动配置成本，也能更大程度上保证关联数据识别结果一致性和相关性。继承场景 支持选择 识别...
添加及管理识别结果
按表添加：根据数据表来选择字段，并为字段添加数据分类。说明 项目管理员支持选择自己所负责项目下所有的数据表；表负责人可选择自己是负责人的数据表。支持选择不超过100个字段。区域③ 为您展示 数据表、表字段、数据分类、数据分级、...
添加及管理识别结果
按表添加：根据数据表来选择字段，并为字段添加数据分类。说明 项目管理员支持选择自己所负责项目下所有的数据表；表负责人可选择自己是负责人的数据表。支持选择不超过100个字段。区域③ 为您展示 数据表、表字段、数据分类、数据分级、...
写数据表
可在字段列表中对上游的输出字段的信息进行修改，比如：对字段重命名、修改注释等。同步模式 全表同步：先清空目标表里已有数据，然后重新插入新数据。增量同步：保留目标表中的已有数据，然后追加插入新数据。分区同步：向目标表的指定...
配置ElasticSearch输出组件
追加数据 即在目标表的已有的数据基础上追加数据，且不修改历史数据。字段分隔符 非必填项，填写字段之间分隔符。如果您没有填写，则系统自动添加英文逗号（,）作为分隔符。输入字段 根据上游的输入，为您展示输入字段。输出字段 为您展示...
配置ElasticSearch输出组件
追加数据 即在目标表的已有的数据基础上追加数据，且不修改历史数据。字段分隔符 非必填项，填写字段之间分隔符。如果您没有填写，则系统自动添加英文逗号（,）作为分隔符。输入字段 根据上游的输入，为您展示输入字段。输出字段 为您展示...
新建及管理数据分类
数据分类用于定义数据在安全领域的业务属性，可对数据进行多级分类打标，更贴合行业标准，本文为您介绍如何新建及管理数据分类。前提条件 已创建数据分类层级。如需创建，请参见 新建数据分类层级。已创建识别特征。如需创建，请参见 添加...
创建元数据
在基于HBase、Elasticsearch或MongoDB数据源创建服务单元之前，需要先创建对应数据源中数据表的元数据，以实现通过元数据确定数据源中数据表的结构。后续您可以通过该元数据读取到对应数据源的数据。本文为您介绍如何创建HBase、...
配置MongoDB输出组件
[{"name":"cf1:a","type":"String"},{"name":"cf1:b","type":"String"}]单击 新建输出字段，根据页面提示填写 字段 及选择 类型。同时您也可以对已添加的字段执行如下操作：单击 操作 列下的 图标，编辑已有的字段。单击 操作 列下的 图标...
正排索引特性
多值排重 可以在schema配置中，将多值正排字段配置为去重正排索引，引擎会通过将doc的正排字段取值进行Hash的方式，将值相同的doc对应的值存储在同一地址，从而达到共用存储空间，存储去重的目的。去重的效果依赖于字段的取值情况。单值正...
- 产品推荐
- 这些文档可能帮助您