逻辑表调度配置入口 请参见 逻辑表任务配置入口,进入逻辑表任务配置页面。单击调度配置,进入逻辑表 调度配置 对话框。逻辑表调度配置 在逻辑表 调度配置 对话框,您需根据下表配置逻辑表任务的调度相关信息。配置项 描述 数据延迟 用于...
逻辑表调度配置入口 请参见 逻辑表任务配置入口,进入逻辑表任务配置页面。单击调度配置,进入逻辑表 调度配置 对话框。逻辑表调度配置 在逻辑表 调度配置 对话框,您需根据下表配置逻辑表任务的调度相关信息。配置项 描述 数据延迟 用于...
配置统计表结构,用于导入统计表数据。统计表记录用户执行相关操作的统计数据。基于统计表数据,可以进行 人群筛选。前提条件 已在您配置的 计算源 中存储统计表,数据格式请参考 统计表数据要求。确保您的统计表中的所有用户ID类型均已在...
您可根据业务场景为维度逻辑表配置任务级的运行超时时间和任务运行失败时的重跑策略,杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。本文将为您介绍如何配置逻辑表运行设置。操作步骤 请参见 数据开发入口,...
背景信息 创建数据表时默认不加密,如果要配置数据表加密,需要在创建数据表时配置加密相关参数。表格存储 提供基于密钥管理服务(Key Management Service,简称KMS)密钥加密和基于自带密钥(Bring Your Own Key,简称BYOK)自定义密钥...
创建数据表时您可以配置数据表加密。表格存储提供基于密钥管理服务(Key Management Service,简称KMS)密钥加密和基于自带密钥(Bring Your Own Key,简称BYOK)自定义密钥加密两种加密方式,请根据实际需要选择。前提条件 已通过表格存储...
您可根据业务场景为维度逻辑表配置任务级的运行超时时间和任务运行失败时的重跑策略,杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。本文将为您介绍如何配置逻辑表运行设置。操作步骤 请参见 数据开发入口,...
在Job运行前,系统会将维表中所有数据加载到Cache中,之后所有的维表查找数据都会通过Cache进行。如果在Cache中无法找到数据,则KEY不存在,并在Cache过期后重新全量加载Cache。适用于远程表数据量小且MISS KEY(源表数据和维表JOIN时,ON...
步骤二:配置普通维度逻辑表字段信息 在 表结构 配置页面配置当前普通维度逻辑表的表字段、数据类型、字段类别等结构信息。说明 单击逻辑表名称后的 图标,可查看逻辑表的基本信息。区域 描述 ① 表字段定位 单击可定位字段列表的 基本配置...
1.3实体下的新增表配置 完成实体配置后,即可以在 数据导入→表结构配置 中,选择对应的实体进行表的新增,具体新增操作请查阅 表结构配置,目前除”用户“实体外的其他实体,支持标签表和行为表的新增。不同实体支持新增表的类型如下:...
Dataphin标签基于离线计算引擎,支持通过表映射方式将物理表字段直接定义成为视图指标。本文将指导您如何通过表映射创建离线视图。前提条件 创建离线视图前需先创建视图所归属的标签项目。详情请参见:创建标签项目。操作步骤 在Dataphin...
创建数据表后,您可以使用表、查询表信息、列出表名称、更新表以及删除表。说明 关于宽表模型的更多信息,请参见 宽表模型。创建表 创建一张数据表,同时指定数据表的主键、数据生命周期(TimeToLive)等。您也可以通过导入JSON格式的配置...
表级详情配置 您可查看所选数据表校验信息,也可以修改规则名称、质量分权重(仅Dataphin数据表和全域数据表支持),同时,您可以单击 操作 列下的 图标编辑该表的规则配置和校验配置,也可以删除该数据表。单击 添加规则,完成配置。批量...
表级详情配置 您可查看所选数据表校验信息,也可以修改规则名称、质量分权重(仅Dataphin数据表和全域数据表支持),同时,您可以单击 操作 列下的 图标编辑该表的规则配置和校验配置,也可以删除该数据表。单击 添加规则,完成配置。批量...
本文为您介绍如何配置表dwd_log_info_di_emr的数据质量监控规则。前提条件 在进行本实验前,请确保已完成 采集数据 和 加工数据。操作步骤 进入数据质量页面。登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发>数据质量,在下拉框中...
本文主要介绍如何使用企业经营管理系统中客户库表及签约表表单数据,来创建并配置企业经营管理大屏。宜搭创建大屏实操视频,请参见:宜搭创建大屏实操视频。创建企业经营管理系统 操作步骤如下:登录宜搭系统,通过空白应用创建名称为 企业...
配置中心 API 标题 API概述 在线表配置 在线表配置 ModifyOnlineConfig 修改在线表配置 修改在线表配置。ListOnlineConfigs 获取在线表配置的详情 获取在线表配置的详情。索引结构 索引结构 CreateIndex 创建索引信息 创建索引信息。...
配置方法 在Web可视化编辑页面的画布中,选中待配置的组件,例如文字组件,单击右侧 样式 中 文字 内容提交框右侧的配置数据源按钮,在 数据源配置 面板,选择 页面变量 数据源进行配置。说明 各组件数据源的配置操作,请参见本产品文档中 ...
规则配置 数据质量支持按表配置或按模板配置质量监控规则,详情请参见:配置规则:按表(单表)、配置规则:按模板(批量)。任务查询 在任务查询页面您可以通过表或节点搜索表历史校验记录及校验详情。配置数据质量规则去噪 去噪管理功能...
本文介绍如何配置表资产属性值。前提条件 已创建自定义扩展属性,具体操作,请参见 自定义扩展属性。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 运营。在顶部菜单栏,单击 资产管理。在左侧菜单栏,选择 系统资产...
本文介绍如何配置表资产属性值。前提条件 已创建自定义扩展属性,具体操作,请参见 自定义扩展属性。操作步骤 登录企业数据智能平台。在页面左上角,单击 图标,选择 运营。在顶部菜单栏,单击 资产管理。在左侧菜单栏,选择 系统资产管理>...
测试实例时系统读取开发表还是生产环境的测试元表,根据元表的配置决定。查看元表配置,请参见 新建元表。元表的开发环境测试时读取参数选中开发表。任务中使用的是 Project_Name_dev.元表名,则读取开发环境测试元表。任务中使用的是 ...
说明 当部分项目或板块下开启自动探查的数据表范围变更,并且删除数据表之前已经开启了数据探查配置,移除数据表后将自动关闭所有相关数据表的自动探查,正在探查中和已生成的任务不受影响。后续说明 探查任务运行结束后,您可查看不同字段...
说明 当部分项目或板块下开启自动探查的数据表范围变更,并且删除数据表之前已经开启了数据探查配置,移除数据表后将自动关闭所有相关数据表的自动探查,正在探查中和已生成的任务不受影响。后续说明 探查任务运行结束后,您可查看不同字段...
配置质量监控规则 配置ods_raw_log_d质量监控规则 表ods_raw_log_d用于接收从OSS同步过来的用户网站访问记录,基于该表业务属性,我们为其配置 表行数非0 校验,并通过关联调度节点的方式,触发该表数据质量规则执行。1、配置分区表达式 ...
在 数据质量 页面的左侧导航栏,选择 规则管理>按表配置,在 规则配置-按表配置 页面找到表ods_user_trace_log,单击 操作 列的 配置监控规则。添加分区。单击+,选择 分区表达式 为 dt=$[yyyymmdd-1],对应表ods_user_trace_log的分区格式...
表值同义词配置(仅文本型表头具有)作用:用于配置表值的同义词,当命中表值同义词时,可以关联到对应的表值;内容配置:进入表头识别效果配置界面后,选择 表值同义词 标签。根据实际业务需求,先在“表值选择”框选择有关表值,后在...
参数 描述 数据表配置 物理数据表 选择 HBase 0.9.4/1.1.x/2.x 的数据源类型、数据源和需要创建元数据的数据表。Rowkey 配置 在读写HBase的数据时,需要通过RowKey字段查询到数据所在的Region及Region下的MemStore和HFile。分隔符 基于业务...
参数 描述 数据表配置 物理数据表 选择 HBase 0.9.4/1.1.x/2.x 的数据源类型、数据源和需要创建元数据的数据表。Rowkey 配置 在读写HBase的数据时,需要通过RowKey字段查询到数据所在的Region及Region下的MemStore和HFile。分隔符 基于业务...
完成输入和输出参数配置后,单击 手动设置血缘 开关,在 血缘配置 对话框中,单击输出表待配置的目标字段后的 图标,下拉选择对应的一个或者多个输入表以及输入表的字段。说明 对能自动解析输入和输出参数的SQL类节点类型,系统会自动匹配...
完成输入和输出参数配置后,单击 手动设置血缘 开关,在 血缘配置 对话框中,单击输出表待配置的目标字段后的 图标,下拉选择对应的一个或者多个输入表以及输入表的字段。说明 对能自动解析输入和输出参数的SQL类节点类型,系统会自动匹配...
配置质量监控规则 配置ods_raw_log_d质量监控规则 表ods_raw_log_d用于接收从OSS同步过来的用户网站访问记录,基于该表业务属性,我们为其配置 表行数非0 校验,并通过关联调度节点的方式,触发该表数据质量规则执行。1、配置分区表达式 ...
数据质量支持按照数据表配置质量监控规则,用来监控表数据是否符合要求,自动拦截问题任务,阻断脏数据向下游蔓延,保障产出的表数据符合预期。规则配置完成后,您可先试跑该规则,确保质量规则的配置符合预期。同时,还可对质量规则执行...
规则配置流程 您可基于表配置单个表的数据质量监控规则,也可基于模板,批量配置多个表的数据质量监控规则,具体如下。基于表配置数据质量监控规则(单个配置监控规则)具体配置操作,详情请参见 配置规则:按表(单表)。基于模板配置数据...
配置字段映射:选择已有表或新建表之后,您可以配置填报字段和底表的对应关系。选择 已有表 为对应的 控件 选择写入的 表字段名,将自动匹配表字段名的 字段描述、字段类型,您也可以自定义设置该字段是否为 主键。您可以 添加 和 删除 ...
创建时序表后,您可以根据实际管理时序表,例如获取实例中的所有时序表名称、更新时序表的配置信息等。注意事项 单个实例中最多可以创建64张表。其中表包含数据表、二级索引表和时序表。更多使用限制介绍,请参见 时序模型限制。由于时序表...
配置字段映射:选择已有表或新建表之后,您可以配置填报字段和底表的对应关系。选择 已有表 为对应的 控件 选择写入的 表字段名,将自动匹配表字段名的 字段描述、字段类型,您也可以自定义设置该字段是否为 主键。您可以 添加 和 删除 ...
索引表配置介绍 索引表配置是向量检索版中最重要的一个配置,它描述了原始文档的数据格式,并基于这些数据如何构建索引。这些索引包括倒排索引、正排索引、摘要索引。 索引表配置 配置概览 {"table_name":"sample","fields":[],...
索引表配置介绍 索引表配置是召回引擎版中最重要的一个配置,它描述了原始文档的数据格式,并基于这些数据如何构建索引。这些索引包括倒排索引、正排索引、摘要索引。 索引表配置 配置概览 {"table_name":"sample","fields":[],...
配置效果 如下图保险数据录入表所示,职业类别、性别、时间、险类1名称、保费、年达成率、保单数 均为数据集字段加载的数据,通过配置填报的形式,可以将数据集表格和填报结合,针对数据集中需要修改的数据,可以快速填报录入,如 保费、年...