创建指标质量规则
字段分组个数校验/字段重复值个数校验：校验表数据过滤：默认关闭，开启后可配置校验表的过滤条件或分区过滤或普通数据过滤，过滤条件将会直接追加至校验SQL中；如校验表有分区过滤需求，建议在调度配置中配置分区表达式，配置后会以校验...
创建指标质量规则
字段分组个数校验/字段重复值个数校验：校验表数据过滤：默认关闭，开启后可配置校验表的过滤条件或分区过滤或普通数据过滤，过滤条件将会直接追加至校验SQL中；如校验表有分区过滤需求，建议在调度配置中配置分区表达式，配置后会以校验...
创建全域数据表质量规则
不同的规则模板支持的计分方式不同，仅支持 质量校验状态 计分方式说明如下：唯一性规则大类的字段分组个数校验、字段重复值个数校验。一致性规则大类的单表字段统计值一致性比较、跨源两表字段统计值一致性比较。稳定性规则大类。自定义...
创建全域数据表质量规则
不同的规则模板支持的计分方式不同，仅支持 质量校验状态 计分方式说明如下：唯一性规则大类的字段分组个数校验、字段重复值个数校验。一致性规则大类的单表字段统计值一致性比较、跨源两表字段统计值一致性比较。稳定性规则大类。自定义...
创建数据表质量规则
不同的规则模板支持的计分方式不同，仅支持 质量校验状态 计分方式说明如下：唯一性规则大类的字段分组个数校验、字段重复值个数校验。一致性规则大类的单表字段统计值一致性比较、跨源两表字段统计值一致性比较。稳定性规则大类。自定义...
创建数据表质量规则
不同的规则模板支持的计分方式不同，仅支持 质量校验状态 计分方式说明如下：唯一性规则大类的字段分组个数校验、字段重复值个数校验。一致性规则大类的单表字段统计值一致性比较、跨源两表字段统计值一致性比较。稳定性规则大类。自定义...
手机号认证SDK返回码
104201 token已失效或不存在（重复校验失败或失效）。105018 token权限不足（使用了本机号码校验的token获取号码）。105019 应用未授权。105021 已达当天取号限额。105302 appid不在白名单。105313 非法请求。200005 用户未授权（READ_...
错误码
常见原因：Token超过有效期 userinformation缺失或编码出错 Token重复校验 121011 号码校验次数超限，同一个手机号码每天校验上限默认为10次。999999 系统异常。常见原因：网络波动或校验Token时phoneNum加密出错。中国联通 错误码 描述 ...
创建实时元表规则
查看质量报告 单击 质量报告，查看当前质量规则的 规则校验概览 和 规则校验明细。您可根据异常结果、分区时间、规则或对象的名称关键字快捷筛选校验明细。单击 图标，查看质量规则的规则校验详情。单击 图标，查看质量规则的执行日志。...
创建实时元表规则
查看质量报告 单击 质量报告，查看当前质量规则的 规则校验概览 和 规则校验明细。您可根据异常结果、分区时间、规则或对象的名称关键字快捷筛选校验明细。单击 图标，查看质量规则的规则校验详情。单击 图标，查看质量规则的执行日志。...
创建数据源质量规则
查看质量报告 单击 质量报告，查看当前质量规则的 规则校验概览 和 规则校验明细。您可根据异常结果、分区时间、规则或对象的名称关键字快捷筛选校验明细。单击 图标，查看质量规则的规则校验详情。单击 图标，查看质量规则的执行日志。...
创建数据源质量规则
查看质量报告 单击 质量报告，查看当前质量规则的 规则校验概览 和 规则校验明细。您可根据异常结果、分区时间、规则或对象的名称关键字快捷筛选校验明细。单击 图标，查看质量规则的规则校验详情。单击 图标，查看质量规则的执行日志。...
自定义渠道
请求头：X-TaskId，即任务ID，用户可以使用该ID唯一确认1次任务请求，可以进行重复性校验（即进行重复过滤）或者在出现异常时提供给Quick BI业务人员进行问题定位。请求参数：timestamp：时间戳 nonce：随机串 sign：验签信息 上述请求参数...
知识配置
在新增、编辑和导入时将会进行数据校验，重复数据操作失败。允许重复模式：选择后，FAQ/闲聊知识库内允许有重复的标题或重复的相似问法。FAQ视角答案策略 当FAQ启用自定义视角后，该功能针对FAQ特定视角答案未配置的情况，配置机器人回复...
2022年度更新日志
运行流水线时设置环境变量值 缺陷修复 修复应用编排占位符无有效值校验信息重复问题 关联流水线错别字修改 优化 导入变量组，变量组键增加特殊字符校验 环境详情页面查询资源接口超时问题 2022-05-17 更新日志 新功能 应用环境详情页面集成...
文档更新动态（2023年）
校验来源表和目标表的重复性。新增Salesforce输入组件，可离线抽取Salesforce实例中的数据。整库迁移新增FTP作为来源库，通过上传并解析Excel文件（.xlsx格式）的指定格式，批量创建FTP文件同步任务。FTP输入组件支持通过指定来源文件中的...
应用校验
OSS：校验bucket名称是否唯一 交换机：校验交换机网段是否有重复 Flink：校验project名称是否唯一 接口类型 异步 请求参数 ApplicationId 应用ID ResourceGroupId 资源组ID 响应参数 Code 状态码 RequestId 请求ID Data 可忽略 Message 若...
管理数据标准待发布对象
重名校验：当落标映射规则的变更类型为新增或更新时，校验当前发布的落标映射规则的名称是否重复。发布校验：校验发布流程是否成功。除重新执行上述预校验外，当落标映射规则的变更类型为新增或更新时，校验落标映射规则的数量；当落标映射...
管理数据标准待发布对象
重名校验：当落标映射规则的变更类型为新增或更新时，校验当前发布的落标映射规则的名称是否重复。发布校验：校验发布流程是否成功。除重新执行上述预校验外，当落标映射规则的变更类型为新增或更新时，校验落标映射规则的数量；当落标映射...
质量规则模板类型
字段重复值个数校验 用于对单个字段重复且多余的数据进行校验。及时性 时间函数比较 用于对单字段和业务日期之间的及时性的对比。单表时间字段比较 用于对同一表的两列的时间差进行比较。两表时间字段比较 用于对不同表的两列的时间差进行...
质量规则模板类型
字段重复值个数校验 用于对单个字段重复且多余的数据进行校验。及时性 时间函数比较 用于对单字段和业务日期之间的及时性的对比。单表时间字段比较 用于对同一表的两列的时间差进行比较。两表时间字段比较 用于对不同表的两列的时间差进行...
批量创建质量规则
不同的规则模板支持的计分方式不同，仅支持 质量校验状态 计分方式说明如下：唯一性规则大类的字段分组个数校验、字段重复值个数校验。一致性规则大类的单表字段统计值一致性比较、跨源两表字段统计值一致性比较。稳定性规则大类。自定义...
批量创建质量规则
不同的规则模板支持的计分方式不同，仅支持 质量校验状态 计分方式说明如下：唯一性规则大类的字段分组个数校验、字段重复值个数校验。一致性规则大类的单表字段统计值一致性比较、跨源两表字段统计值一致性比较。稳定性规则大类。自定义...
质量规则参数配置
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
质量规则参数配置
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
常见问题
为保证DAS企业版 V1的审计明细数据“不重复、不丢失”，DAS会在迁移过程中导出DAS企业版 V1的所有数据，并通过ETL（Extract Transform Load）进行处理校验，然后再写入到DAS企业版 V3的存储引擎。迁移过程可能会持续一段时间，请耐心等待。...
规范建模任务提交说明
校验项 描述 重复性检查 将根据所启用的时效，检查计算逻辑是否存在重复。类型校验 将根据所启用的时效，校验计算逻辑输出类型与定义类型是否兼容。操作执行 变量配置是对计算任务代码中所用的变量进行检查，包括本地变量是否已设置、参数...
规范建模任务提交说明
校验项 描述 重复性检查 将根据所启用的时效，检查计算逻辑是否存在重复。类型校验 将根据所启用的时效，校验计算逻辑输出类型与定义类型是否兼容。操作执行 变量配置是对计算任务代码中所用的变量进行检查，包括本地变量是否已设置、参数...
配置节点HTTP响应头
跨域校验规则 重要 是否允许重复 和 跨域校验 这两个配置项之间存在互斥，是否允许重复 配置为 允许 的情况下，跨域校验将会失效。任意匹配：自定义响应头参数“Access-Control-Allow-Origin”的值设置为“*”不论用户请求里面是否携带...
添加及管理识别结果
校验结果 支持查看文件上传中校验通过、校验异常、重复记录的信息。校验通过：为您展示文件上传通过的记录，包括记录在原始文件中对应行号、表、字段、数据分类、数据分级信息。校验异常：在文件上传过程中出现解析或校验失败等异常情况，...
添加及管理识别结果
校验结果 支持查看文件上传中校验通过、校验异常、重复记录的信息。校验通过：为您展示文件上传通过的记录，包括记录在原始文件中对应行号、表、字段、数据分类、数据分级信息。校验异常：在文件上传过程中出现解析或校验失败等异常情况，...
新建及管理数据标准
创建Dataphin数据表质量规则时，可引用此处配置的质量监控规则，规则配置和校验配置复用标准配置不可修改，支持自定义规则强弱、调度方式、生效开关、告警等信息。当前标准映射上的所有资产对象，可在资产质量模块引用配置的内容质量监控，...
新建及管理数据标准
创建Dataphin数据表质量规则时，可引用此处配置的质量监控规则，规则配置和校验配置复用标准配置不可修改，支持自定义规则强弱、调度方式、生效开关、告警等信息。当前标准映射上的所有资产对象，可在资产质量模块引用配置的内容质量监控，...
功能更新动态（2024年）
Excel批量上传识别结果操作反馈优化，拆分线上重复记录列表和导入校验异常的列表，支持选择重复记录是否需要导入。安全算法新增FPE加解密算法。新建及管理识别规则 查看数据分类预置模型 添加及管理识别结果 标签工厂 离线视图新增码表配置...
文档更新动态（2024年）
Excel批量上传识别结果操作反馈优化，拆分线上重复记录列表和导入校验异常的列表，支持选择重复记录是否需要导入。安全算法新增FPE加解密算法。更新说明 新建及管理识别规则 查看数据分类预置模型 添加及管理识别结果 标签工厂-数据准备/...
附录：消息格式
数据质量校验结果反馈事件 dataworks:DqcCheck:DqcCheckFinishedEvent 数据质量校验完成 消息实体格式：数据质量校验完成事件 dataworks:ProjectChange:DeleteProject 租户删除项目空间前置事件 消息实体格式：租户删除项目空间前置事件 ...
API概览
GetRuleDetail 获取规则的明细信息 获取规则的明细信息。GetRule 获取规则的基本信息 获取规则的基本信息。ListRules 获取规则列表 获取规则列表。InvalidRule 删除规则 删除规则。评分管理 评分管理 UpdateSubScoreForApi 编辑评分子项 ...
有效映射关系管理
配置质量监控 质量监控规则支持引用 数据标准监控，同时为您展示当前资产对象已经在其他模块配置过的质量监控规则作为参考，以避免配置太多重复的监控规则重复运行浪费资源或产生冲突。详情请参加 配置质量监控。解除映射关系 您可将有效...
有效映射关系管理
配置质量监控 质量监控规则支持引用 数据标准监控，同时为您展示当前资产对象已经在其他模块配置过的质量监控规则作为参考，以避免配置太多重复的监控规则重复运行浪费资源或产生冲突。详情请参加 配置质量监控。解除映射关系 您可将有效...
创建资源
确认上述参数后点击 确定，会根据所选配置进行库存校验，如果无法创建会提示某项参数配置库存不足，修改参数再次提交即可。3.勾选刚才配置好的ECS实例资源，点击 批量创建，发起资源创建。弹出框会展示刚才配置好的资源的Terraform Code，...
- 产品推荐
- 这些文档可能帮助您