逻辑调度配置概述

逻辑表调度配置 在逻辑表 调度配置 对话框,您需根据下表配置逻辑表任务的调度相关信息。配置项 描述 数据延迟 用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。调度属性 逻辑表调度属性用于定义逻辑表任务在调度过程中的调度规则,...

逻辑调度配置概述

逻辑表调度配置 在逻辑表 调度配置 对话框,您需根据下表配置逻辑表任务的调度相关信息。配置项 描述 数据延迟 用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。配置调度属性 逻辑表调度属性用于定义逻辑表任务在调度过程中的调度...

配置规则:按模板(批量)

如果您需要批量为表配置分区表达,则可以单击 设置分区表达 按钮为选中的表批量添加分区表达。单击 生成规则,进入 规则验证 页面。您可以单击自定义列,按需自定义规则详情表中需要显示的内容。在 规则验证 页面您可以进行如下操作...

统计

单击右上角 新建表配置>统计表,进入 新建统计表数据配置 页面。选择要导入的计算源、数据表。数据表可以选择表,也可以选择视图。若您选择的是表,则系统会自动识别该表是否包含时间分区。若表包含时间分区,请选择时间分区字段,并输入...

配置示例:MaxCompute

在左侧导航栏,单击 规则管理>按表配置。选择 引擎/数据源 为 MaxCompute,显示当前数据源下所有的表。您也可以输入目标表名(支持表名首字母模糊搜索),查找对应的表。单击相应表后的 配置监控规则。配置分区表达 数据质量通过分区表达...

订单汇总

单击右上角 新建表配置>订单汇总,进入 新建订单汇总配置 页面。选择要导入的计算源、数据表。若当前账号对您选择的表无读权限,将出现报错提示,如下图所示。请在MaxCompute项目中对Quick Audience系统账号进行数据表的读权限授权,单击下...

订单明细

单击右上角 新建表配置>订单明细,进入 新建订单明细配置 页面。选择要导入的计算源、数据表。数据表可以选择表,也可以选择视图。若您选择的是表,则系统会自动识别该表是否包含时间分区。若表包含时间分区,请选择时间分区字段,并输入...

数据质量概述

使用场景 在离线数据校验场景下,数据质量通过表配置的分区表达来匹配节点每天产出的表分区,数据质量规则关联产出该表数据的调度节点,当任务运行完成便会触发质量规则校验,您可以设置规则的强弱来控制节点是否失败退出,从而避免脏...

更新时序

如果要查看更新后的时序表配置信息,您可以通过查询时序表描述信息实现。具体操作,请参见 查询时序表描述信息。如果要读写时序表中的数据,您可以通过调用读写数据接口实现。具体操作,请参见 写入时序数据 和 查询时序数据。

用户行为

单击右上角 新建表配置>用户行为,进入 新建用户行为配置 页面。选择要导入的计算源、数据表。数据表可以选择表,也可以选择视图。若您选择的是表,则系统会自动识别该表是否包含时间分区。若表包含时间分区,请选择时间分区字段,并输入...

配置集成管道质量监控

分区表达 若数据为分区,需配置分区表达,支持 分区表达类型 和 自定义分区表达。分区表达详情请参见 内置分区表达类型。分区预算 当前时间下,根据分析表达的推算分区。单击 确定,完成质量规则配置。说明 质量规则配置...

配置集成管道质量监控

分区表达 若数据为分区,需配置分区表达,支持 分区表达类型 和 自定义分区表达。分区表达详情请参见 内置分区表达类型。分区预算 当前时间下,根据分析表达的推算分区。单击 确定,完成质量规则配置。说明 质量规则配置...

用户标签

单击右上角 新建表配置>用户标签,进入 新建用户标签配置 页面。选择要导入的计算源、数据表。数据表可以选择表,也可以选择视图。若您选择的是表,则系统会自动识别该表是否包含时间分区。若表包含时间分区,请选择时间分区字段,并输入...

创建加密

创建数据时您可以配置数据加密。表格存储提供基于密钥管理服务(Key Management Service,简称KMS)密钥加密和基于自带密钥(Bring Your Own Key,简称BYOK)自定义密钥加密两种加密方式,请根据实际需要选择。前提条件 已通过表格存储...

配置数据质量监控

在数据质量左侧导航栏,单击 规则管理>按表配置 根据如下参数定位目标表。数据源:E-MapReduce。数据库:您当前的生产项目。表:本案例需要为dwd_log_info_di_emr表设置监控规则。在搜索结果中找到目标表,单击操作列的 监控配置,进入该表...

逻辑运行配置

您可根据业务场景为维度逻辑表配置任务级的运行超时时间和任务运行失败时的重跑策略,杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。本文将为您介绍如何配置逻辑表运行设置。操作步骤 请参见 数据开发入口,...

创建时序

func CreateTimeseriesTableSample(client*tablestore.TimeseriesClient,timeseriesTableName string,timeToLive int64){ fmt.Println("[Info]:Begin to create timeseries table:",timeseriesTableName)/构造时序表配置信息。...

逻辑运行配置

您可根据业务场景为维度逻辑表配置任务级的运行超时时间和任务运行失败时的重跑策略,杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。本文将为您介绍如何配置逻辑表运行设置。操作步骤 在Dataphin首页,单击...

多实体管理

不同实体支持新增表的类型如下:用户实体:用户标签、统计表、用户行为、订单明细、订单汇总、临时标签表、商品标签 其他实体:标签表、行为表 新增表配置完成后,在配置 调度任务 时,也需要按照不同实体进行调度任务的配置。二、多实体的...

自定义血缘配置

在 血缘配置 页面,单击 新增血缘组,进行输入与输出表配置。在 配置输入表 页面,进行参数配置,操作完成后单击 确定。参数 描述 所属环境 输入输出表的所属环境,支持选择 自动、开发 或 生产。所属环境选择 自动,相当于代码中以空间...

自定义血缘配置

在 血缘配置 页面,单击 新增血缘组,进行输入与输出表配置。在 配置输入表 页面,进行参数配置,操作完成后单击 确定。参数 描述 所属环境 输入输出表的所属环境,支持选择 自动、开发 或 生产。所属环境选择 自动,相当于代码中以空间...

通过映射创建离线视图

Dataphin标签基于离线计算引擎,支持通过映射方式将物理字段直接定义成为视图指标。本文将指导您如何通过映射创建离线视图。前提条件 创建离线视图前需先创建视图所归属的标签项目。详情请参见:创建标签项目。操作步骤 在Dataphin...

简介

目前支持的四种凭证类型如下:验证方式 说明 交互式配置凭证(快速)非交互式配置凭证 AK 使用AccessKey ID/Secret访问。配置AccessKey凭证 配置AccessKey凭证 StsToken 使用STS Token访问。配置STS Token凭证 配置STS Token凭证 ...

数据导入快速入门

单击右上角 新建 表配置>用户标签,进入 新建用户标签配置 页面。选择要导入的计算源、数据表。若包含时间分区,请设置分区。设置数据表别名、用户标识、用户标识类型、标签别名、标签映射的属性、标签类型、ID类型、ID加密方式、标签类目...

创建数据

reservedThroughtput 为数据表配置预留读吞吐量或预留写吞吐量。容量型实例中的数据表的预留读/写吞吐量只能设置为0,不允许预留。默认值为0,即完全按量计费。单位为CU。当预留读吞吐量或预留写吞吐量大于0时,表格存储会根据配置为数据表...

任务管理

新增SQL任务 单击 新增SQL任务,可参考下表配置数据库、变更SQL语句等信息。配置项 说明 备注 详细描述变更原因或目标,减少沟通成本。数据库 支持选择单个或多个目标数据库。说明 管控模式为自由操作或稳定变更的数据库实例,需要登录后...

宜搭创建大屏实操

本文主要介绍如何使用企业经营管理系统中客户库及签约表单数据,来创建并配置企业经营管理大屏。宜搭创建大屏实操视频,请参见:宜搭创建大屏实操视频。创建企业经营管理系统 操作步骤如下:登录宜搭系统,通过空白应用创建名称为 企业...

更新数据

reserved_throughput 为数据表配置预留读吞吐量或预留写吞吐量。说明 ReservedThroughput的调整有时间间隔限制,目前为1分钟。容量型实例中的数据表的预留读/写吞吐量只能设置为0,不允许预留。默认值为0,即完全按量计费。单位为CU。当...

维度逻辑概述

配置维度逻辑表 Dataphin支持创建不同类型的维度逻辑表,您可以在维度逻辑表配置页面进行创建。详情如下:逻 辑表类型 描述 新建普通维度逻辑表 普通维度逻辑表用于描述实体对象,包含对实体对象的各方面描述。例如,会员普通维度逻辑表,...

新建层级维度逻辑

运行配置:您可根据业务场景为该维度逻辑表配置任务级的运行超时时间和任务运行失败时的重跑策略,杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。详情说明,请参见:计算任务运行配置。步骤四:保存并提交逻辑...

新建层级维度逻辑

运行配置:您可根据业务场景为该维度逻辑表配置任务级的运行超时时间和任务运行失败时的重跑策略,杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。详情说明,请参见:计算任务运行配置。步骤四:保存并提交逻辑...

API概览

配置中心 API 标题 API概述 在线表配置 在线表配置 ModifyOnlineConfig 修改在线表配置 修改在线表配置。ListOnlineConfigs 获取在线表配置的详情 获取在线表配置的详情。索引结构 索引结构 CreateIndex 创建索引信息 创建索引信息。...

创建逻辑模型:明细

明细表用于存储大量能够体现业务活动状况的实际数据或详细数值,是数据聚合后依据某个维度生成的结果...后续步骤 维度表创建完成后,您仍需为表配置字段管理、关联关系、分区设置等内容,并将该表发布至对应环境,详情请参见 发布模型至引擎。

数据操作

如果要为数据表配置数据生命周期等,请打开 高级设置 开关并配置数据生命周期、最大版本数、数据有效版本偏差、预留读吞吐量或者预留写吞吐量。单击 确定。创建数据表后,请根据实际需要执行相应操作管理数据表。操作 说明 列出表名称 在 ...

配置规则:按(单

数据质量支持按照数据表配置质量监控规则,用来监控表数据是否符合要求,自动拦截问题任务,阻断脏数据向下游蔓延,保障产出的表数据符合预期。规则配置完成后,您可先试跑该规则,确保质量规则的配置符合预期。同时,还可对质量规则执行...

什么是应用配置管理ACM?

凭借配置变更、配置推送、历史版本管理、灰度发布、配置变更审计等配置管理工具,ACM能帮助您集中管理所有应用环境中的配置,降低分布系统中管理配置的成本,并降低因错误的配置变更造成可用性下降甚至发生故障的风险。迁移到MSE Nacos ...

Quick BI v4.6.1版本说明

发布日期 2023年5月9日 重点升级概览 电子表格功能大升级 专业版 支持自由单元格,可拖入数据集字段并设置多种聚合、明细模式,轻松搭建复杂报表。专业版 支持卡片视图,快速制作分栏报表以及可视化分析报告中的指标卡。专业版 支持分页...

配置表资产属性

本文介绍如何配置表资产属性值。前提条件 已创建自定义扩展属性,具体操作,请参见 自定义扩展属性。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 运营。在顶部菜单栏,单击 资产管理。在左侧菜单栏,选择 系统资产...

配置表资产属性

本文介绍如何配置表资产属性值。前提条件 已创建自定义扩展属性,具体操作,请参见 自定义扩展属性。操作步骤 登录企业数据智能平台。在页面左上角,单击 图标,选择 运营。在顶部菜单栏,单击 资产管理。在左侧菜单栏,选择 系统资产管理>...

数据管理

进入数据表配置页面 登录 PolarDB分布版控制台。在页面左上角选择目标实例所在地域。在左侧导航栏中,单击 实例列表。找到目标实例,单击实例ID。在左侧导航栏中单击 配置与管理>数据库管理。在数据库列表中找到目标数据库,单击数据库...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
轻量应用服务器 云服务器 ECS DDoS防护 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用