逻辑表调度配置概述
逻辑表调度配置 在逻辑表 调度配置 对话框，您需根据下表配置逻辑表任务的调度相关信息。配置项 描述 数据延迟 用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。调度属性 逻辑表调度属性用于定义逻辑表任务在调度过程中的调度规则，...
逻辑表调度配置概述
逻辑表调度配置 在逻辑表 调度配置 对话框，您需根据下表配置逻辑表任务的调度相关信息。配置项 描述 数据延迟 用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。配置调度属性 逻辑表调度属性用于定义逻辑表任务在调度过程中的调度...
统计表
单击右上角 新建表配置>统计表，进入 新建统计表数据配置 页面。选择要导入的计算源、数据表。数据表可以选择表，也可以选择视图。若您选择的是表，则系统会自动识别该表是否包含时间分区。若表包含时间分区，请选择时间分区字段，并输入...
订单汇总
单击右上角 新建表配置>订单汇总，进入 新建订单汇总配置 页面。选择要导入的计算源、数据表。若当前账号对您选择的表无读权限，将出现报错提示，如下图所示。请在MaxCompute项目中对Quick Audience系统账号进行数据表的读权限授权，单击下...
订单明细
单击右上角 新建表配置>订单明细，进入 新建订单明细配置 页面。选择要导入的计算源、数据表。数据表可以选择表，也可以选择视图。若您选择的是表，则系统会自动识别该表是否包含时间分区。若表包含时间分区，请选择时间分区字段，并输入...
用户行为
单击右上角 新建表配置>用户行为，进入 新建用户行为配置 页面。选择要导入的计算源、数据表。数据表可以选择表，也可以选择视图。若您选择的是表，则系统会自动识别该表是否包含时间分区。若表包含时间分区，请选择时间分区字段，并输入...
数据加密
配置数据表名称、表主键、是否允许更新等。打开 是否加密 开关后，选择 加密类型 为 kms服务主密钥。单击 确定。创建数据表后，单击数据表名称，您可以在 表管理 页面中 基本详情 页签，确认表的 是否加密 取值为 是-kms服务主密钥，表示...
用户标签
单击右上角 新建表配置>用户标签，进入 新建用户标签配置 页面。选择要导入的计算源、数据表。数据表可以选择表，也可以选择视图。若您选择的是表，则系统会自动识别该表是否包含时间分区。若表包含时间分区，请选择时间分区字段，并输入...
逻辑表运行配置
您可根据业务场景为维度逻辑表配置任务级的运行超时时间和任务运行失败时的重跑策略，杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。本文将为您介绍如何配置逻辑表运行设置。操作步骤 请参见 数据开发入口，...
逻辑表运行配置
您可根据业务场景为维度逻辑表配置任务级的运行超时时间和任务运行失败时的重跑策略，杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。本文将为您介绍如何配置逻辑表运行设置。操作步骤 在Dataphin首页，单击...
创建时序表
func CreateTimeseriesTableSample(client*tablestore.TimeseriesClient,timeseriesTableName string,timeToLive int64){ fmt.Println("[Info]:Begin to create timeseries table:",timeseriesTableName)/构造时序表配置信息。...
多实体管理
不同实体支持新增表的类型如下：用户实体：用户标签、统计表、用户行为、订单明细、订单汇总、临时标签表、商品标签 其他实体：标签表、行为表 新增表配置完成后，在配置 调度任务 时，也需要按照不同实体进行调度任务的配置。二、多实体的...
数据表操作
read_cu 否 0 为数据表配置预留读吞吐量或预留写吞吐量。默认值均为0，即完全按量计费。单位为CU。容量型实例中的数据表的预留读/写吞吐量只能设置为0，不允许预留。当预留读吞吐量或预留写吞吐量大于0时，表格存储会根据配置为数据表预留...
批量创建质量规则
权限说明 超级管理员、质量管理员支持批量配置质量规则、新建及删除异常归档表、配置打分权重。质量负责人支持在自己所负责的监控对象下配置质量规则、新建及删除异常归档表、配置打分权重。质量负责人、普通用户需具有数据表、数据源的...
批量创建质量规则
权限说明 超级管理员、质量管理员支持批量配置质量规则、新建及删除异常归档表、配置打分权重。质量负责人支持在自己所负责的监控对象下配置质量规则、新建及删除异常归档表、配置打分权重。质量负责人、普通用户需具有数据表、数据源的...
通过PrestoDB使用Tablestore
配置项 示例 是否必选 说明-server localhost:8080 是 Presto Server的URI，请根据实际替换。此项的配置必须与PrestoDB安装目录下 etc/config.properties 文件中的 discovery.uri 参数的配置相同。catalog tablestore 是 Catalog配置文件的...
配置数据质量监控
在数据质量左侧导航栏，单击 规则管理>按表配置 根据如下参数定位目标表。数据源：E-MapReduce。数据库：您当前的生产项目。表：本案例需要为dwd_log_info_di_emr表设置监控规则。在搜索结果中找到目标表，单击操作列的 监控配置，进入该表...
创建数据表
reservedThroughtput 为数据表配置预留读吞吐量或预留写吞吐量。容量型实例中的数据表的预留读/写吞吐量只能设置为0，不允许预留。默认值为0，即完全按量计费。单位为CU。当预留读吞吐量或预留写吞吐量大于0时，表格存储会根据配置为数据表...
数据质量入门
背景信息 数据质量支持以表为维度，为某个表配置质量规则；或以规则模板为维度，批量为多个表配置某个质量规则。本文仅以配置单表的质量规则示例。使用模板批量为多个表配置质量规则，详情请参见 配置规则：按模板（批量）。更多数据质量...
宜搭创建大屏实操
本文主要介绍如何使用企业经营管理系统中客户库表及签约表表单数据，来创建并配置企业经营管理大屏。宜搭创建大屏实操视频，请参见：宜搭创建大屏实操视频。创建企业经营管理系统 操作步骤如下：登录宜搭系统，通过空白应用创建名称为 企业...
API概览
配置中心 API 标题 API概述 在线表配置 在线表配置 ModifyOnlineConfig 修改在线表配置 修改在线表配置。ListOnlineConfigs 获取在线表配置的详情 获取在线表配置的详情。索引结构 索引结构 CreateIndex 创建索引信息 创建索引信息。...
维度逻辑表概述
配置维度逻辑表 Dataphin支持创建不同类型的维度逻辑表，您可以在维度逻辑表配置页面进行创建。详情如下：逻 辑表类型 描述 新建普通维度逻辑表 普通维度逻辑表用于描述实体对象，包含对实体对象的各方面描述。例如，会员普通维度逻辑表，...
创建逻辑模型：明细表
明细表用于存储大量能够体现业务活动状况的实际数据或详细数值，是数据聚合后依据某个维度生成的结果...后续步骤 维度表创建完成后，您仍需为表配置字段管理、关联关系、分区设置等内容，并将该表发布至对应环境，详情请参见 发布模型至引擎。
数据表操作
如果要为数据表配置数据生命周期等，请打开 高级设置 开关并配置数据生命周期、最大版本数、数据有效版本偏差、预留读吞吐量或者预留写吞吐量。单击 确定。创建数据表后，请根据实际需要执行相应操作管理数据表。操作 说明 列出表名称 在 ...
数据质量概述
规则配置 数据质量支持按表配置或按模板配置质量监控规则，详情请参见：配置规则：按表（单表）、配置规则：按模板（批量）。任务查询 在任务查询页面您可以通过表或节点搜索表历史校验记录及校验详情。配置数据质量规则去噪 去噪管理功能...
表格问答
说明 表名配置规则是英文字母、数据或者下划线，表名不要超过20个字符。字段名称，命名规则是英文字母或下划线，不能以下划线开头，每个字段名不要超过30个字符。每个excel最多支持30个字段的数据写入和查询，超出的部分会忽略。三、添加...
配置表资产属性
本文介绍如何配置表资产属性值。前提条件 已创建自定义扩展属性，具体操作，请参见 自定义扩展属性。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 运营。在顶部菜单栏，单击 资产管理。在左侧菜单栏，选择 系统资产...
配置表资产属性
本文介绍如何配置表资产属性值。前提条件 已创建自定义扩展属性，具体操作，请参见 自定义扩展属性。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 运营。在顶部菜单栏，单击 资产管理。在左侧菜单栏，选择 系统资产管理>...
查看并管理实时任务
查看元表配置，请参见 新建元表。元表的开发环境测试时读取参数选中开发表。任务中使用的是 Project_Name_dev.元表名，则读取开发环境测试元表。任务中使用的是 Project_Name.元表名，则读取生产元表。如果您没有生产环境测试元表权限，则...
查看并管理实时任务
查看元表配置，请参见 新建元表。元表的开发环境测试时读取参数选中开发表。任务中使用的是 Project_Name_dev.元表名，则读取开发环境测试元表。任务中使用的是 Project_Name.元表名，则读取生产元表。如果您没有生产环境测试元表权限，则...
数据导入概述
不支持为同一个数据表配置多个数据表结构。不支持将同一个数据表加入多个调度任务。若一个调度任务显示为 执行成功，代表该任务包含的所有表导入成功；若显示 执行失败，请将鼠标移动到 执行失败 上方查看每个表的报错信息，整改后单击 ...
配置数据质量监控
2、配置监控规则 表ods_raw_log_d用于接收从OSS同步过来的网站访问记录，为用户画像分析场景源头表，所以为避免后续无效加工及质量问题，我们针对该表配置表行数大于0的强监控规则，来判断同步任务是否往该表该分区写入数据。当监控到ods_...
部署管理
点击 标识查询节点的小方块 可以编辑查询节点的数据副本数和最小服务比例：重要 修改配置后会实时生效 修改数据节点配置 点击 标识数据节点的小方块 可以编辑数据节点的在线配置和在线表配置：重要 修改配置后会实时生效 生效/取消索引表 ...
部署管理
点击 标识查询节点的小方块 可以编辑查询节点的数据副本数和最小服务比例：注意：修改配置后会实时生效 修改数据节点配置 点击 标识数据节点的小方块 可以编辑数据节点的在线配置和在线表配置：重要 修改配置后会实时生效 生效/取消索引表 ...
数据质量风险监控
在 数据质量 页面的左侧导航栏，选择 规则管理>按表配置，在 规则配置-按表配置 页面找到表ods_user_trace_log，单击 操作 列的 配置监控规则。添加分区。单击+，选择 分区表达式 为 dt=$[yyyymmdd-1]，对应表ods_user_trace_log的分区格式...
步骤三：配置节点运行配置
步骤二：（可选）配置数据表的 字段映射关系。说明 对能自动解析输入和输出参数的SQL类节点类型，系统会自动匹配输入表和输出表的字段映射关系，当解析出的血缘关联存在差异，需要修改字段映射关系时，也支持手动配置。针对不能自动解析...
步骤三：配置节点运行配置
步骤二：（可选）配置数据表的 字段映射关系。说明 对能自动解析输入和输出参数的SQL类节点类型，系统会自动匹配输入表和输出表的字段映射关系，当解析出的血缘关联存在差异，需要修改字段映射关系时，也支持手动配置。针对不能自动解析...
数据配置
说明 表名配置规则是英文字母、数据或者下划线，表名不要超过20个字符。字段名称，命名规则是英文字母或下划线，不能以下划线开头，每个字段名不要超过30个字符。每个excel最多支持30个字段的数据写入和查询，超出的部分会忽略。2、非结构...
配置规则：按表（单表）
数据质量支持按照数据表配置质量监控规则，用来监控表数据是否符合要求，自动拦截问题任务，阻断脏数据向下游蔓延，保障产出的表数据符合预期。规则配置完成后，您可先试跑该规则，确保质量规则的配置符合预期。同时，还可对质量规则执行...
配置数据质量监控
2、配置监控规则 表ods_raw_log_d用于接收从OSS同步过来的网站访问记录，为用户画像分析场景源头表，所以为避免后续无效加工及质量问题，我们针对该表配置表行数大于0的强监控规则，来判断同步任务是否往该表该分区写入数据。当监控到ods_...
- 产品推荐
- 这些文档可能帮助您