全局变量配置
本文介绍全局变量在蓝图编辑器的使用方法。说明 全局变量功能为7.0版本产品新增功能，请根据 新版控制台 环境进行操作。前提条件 已登录DataV控制台 已进入蓝图编辑器 操作步骤 将需要的 图层节点 添加到主画布中。单击左侧导航栏的 全局...
跨库操作（dblink、postgres_fdw）
创建数据库 postgres=>\c<数据库名>/切换数据库 示例 postgres=>create database db1;CREATE DATABASE postgres=>\c db1 新建postgres_fdw插件。db1=>create extension postgres_fdw;新建用于连接远端目标数据库的服务器对象。db1=>CREATE ...
按应用关联
说明 工作组若有创建数据标准、数据源和全局变量，不区分创建方式，默认拉取这3个模块的全量数据导入导出。关联项说明 关联项 说明 应用 对应数据API上线时关联的应用。说明 全量新建、按应用新建、按线上API关联新建时获取到该关联项。...
DBLE与PolarDB多主集群（库表）结合使用最佳实践
原理图如下所示：如果仅使用DBLE，在需要提升数据库集群读写能力时，需要先使用传统数据库运维手段进行数据复制和备份恢复，再配合业务系统停写、DBLE配置更新、数据验证、业务系统恢复等步骤来提升数据库集群的读写能力。其中，数据库的运...
按线上场景关联
工作组若有创建数据标准、数据源和全局变量，不区分创建方式，默认拉取这3个模块的全量数据导入导出。关联项说明 关联项 说明 场景 对应数据开发生产状态的场景。说明 需在数据开发模块部署及运行生产场景成功。场景节点 对应生产场景包含...
全局索引
结果显示如下：数据库将使用全局索引直接找到数据所在的子分区。QUERY PLAN-Global Index Scan using partition_range_idx_global on partition_range Index Cond:(id=1)(2 rows)非分区键的唯一约束 依然使用上述示例中的分区表，其分区键...
按逻辑表关联
工作组若有创建数据标准、数据源和全局变量，不区分创建方式，默认拉取这3个模块的全量数据导入导出。关联项说明 关联项 说明 场景节点 对应生产场景包含的场景节点。说明 需在数据开发模块创建场景节点，且该场景节点被场景引用。场景 ...
模板变量配置
全局变量给局部变量赋值时，全局变量和局部变量的数据类型必须相同。基于模板创建后的实例名称 说明 上文中演示配置全局变量使用的-（中划线）可用任意字符或字符串替换（需满足实例的命名规则），替换变量时会保留用于拼接的字符。查看...
实时模式变量配置
参数值 全局变量：默认为全局变量所定义的变量值，不支持设置。更多信息，请参见 新建全局变量。空间名称变量：参数值即为空间名称，不支持转换空间名称变量为其他类型。本地变量：最长支持258位字符或设置为空值。非变量：不支持定义。...
实时模式变量配置
参数值 全局变量：默认为全局变量所定义的变量值，不支持设置。更多信息，请参见 新建全局变量。空间名称变量：参数值即为空间名称，不支持转换空间名称变量为其他类型。本地变量：最长支持258位字符或设置为空值。非变量：不支持定义。...
离线模式变量配置
参数值 全局变量：默认为全局变量所定义的变量值，不支持设置。更多信息，请参见 新建全局变量。空间名称变量：参数值即为空间名称，不支持转换空间名称变量为其他类型。本地变量：最长支持258位字符或设置为空值。非变量：不支持定义。...
离线模式变量配置
参数值 全局变量：默认为全局变量所定义的变量值，不支持设置。更多信息，请参见 新建全局变量。空间名称变量：参数值即为空间名称，不支持转换空间名称变量为其他类型。本地变量：最长支持258位字符或设置为空值。非变量：不支持定义。...
通过脚本模式配置离线同步任务
当您需要实现更精细化的配置管理时，您可以使用脚本模式配置离线同步任务，通过编写数据同步的JSON脚本并结合DataWorks调度参数使用，将源端单表或分库分表的全量或增量数据周期性同步至目标数据表。本文为您介绍脚本模式配置离线同步任务...
PL错误码（ODPS-02CCCCX）
ODPS-0220125:Illegal assignment SEMANTIC 5 不合法的变量赋值。修改变量赋值，确保合法。ODPS-0220135:Illegal argument value SEMANTIC 5 不合法的参数值。修改参数值，确保合法。ODPS-0220145:Illegal variable reference SEMANTIC 5 ...
通过向导模式配置离线同步任务
编辑源端字段：您可以通过单击类型右侧的 图标实现如下功能：使用源端数据库支持的函数，对字段进行函数处理，例如，通过Max（id）控制仅同步最大值。在字段映射未拉取全部字段的情况下，手动编辑源端字段。说明 MaxCompute Reader暂不支持...
管理过滤器
再次打开过滤器，可以单击 关联全局变量，将已创建的全局变量绑定到当前过滤器中，您可以直接使用该全局变量。创建成功的过滤器会排列显示在过滤器列表中。重要 通过过滤器创建的过滤器，可以被当前数据看板中的任意组件调用，调用方式请...
管理过滤器
再次打开过滤器，可以单击 关联全局变量，将已创建的全局变量绑定到当前过滤器中，您可以直接使用该全局变量。创建成功的过滤器会排列显示在过滤器列表中。重要 通过过滤器创建的过滤器，可以被当前数据看板中的任意组件调用，调用方式请...
参数配置及使用节点参数
参数值 全局变量：默认为全局变量所定义的变量值，不支持设置。更多信息，请参见 新建全局变量。空间名称变量：参数值即为空间名称。本地变量：最长支持258位字符或设置为空值。跨节点变量：设置上游依赖后，可以选择上游的跨节点输出参数...
参数配置及使用节点参数
参数值 全局变量：默认为全局变量所定义的变量值，不支持设置。更多信息，请参见 新建全局变量。空间名称变量：参数值即为空间名称。本地变量：最长支持258位字符或设置为空值。跨节点变量：设置上游依赖后，可以选择上游的跨节点输出参数...
授权与回收变量权限
前提条件 已在全局变量中创建变量组。如何创建，请参见 新建全局变量。授权变量权限 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图指引，进入 变量授权 对话框。根据变量授权对话框提示，配置参数。参数 描述 账号类型 根据业务...
授权与回收变量权限
前提条件 已在全局变量中创建变量组。如何创建，请参见 新建全局变量。授权变量权限 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图指引，进入 变量授权 对话框。根据变量授权对话框提示，配置参数。参数 描述 账号类型 根据业务...
申请、续期和交还变量权限
前提条件 已在全局变量中创建变量组。如何创建，请参见 新建全局变量。申请变量权限 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图操作指引，进入 申请变量权限 对话框。在 申请变量权限 对话框，配置参数。参数 描述 变量 选择所...
申请、续期和交还变量权限
前提条件 已在全局变量中创建变量组。如何创建，请参见 新建全局变量。申请变量权限 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图操作指引，进入 申请变量权限 对话框。在 申请变量权限 对话框，配置参数。参数 描述 变量 选择所...
实现动态数据加和
以数据库为例，输入SQL命令。select floor(rand()*(1000)+1)as value 重复上述操作，再创建一个命名为B的动态变量。切换到蓝图编辑器。添加所有图层节点、所有全局变量、2个定时器节点和2个串行数据处理节点到蓝图主画布中。连接组件。选择...
参数配置
全局变量：在Dataphin 规划->公共定义->全局变量 中事先声明定义的变量，可以在租户内任何节点或代码中引用，系统初始内置的全局变量有${bizdate}。说明 出于数据安全考虑，账号密码类型的全局变量在此无法使用，将被视作本地变量，需要...
参数配置
全局变量：在Dataphin 规划->公共定义->全局变量 中事先声明定义的变量，可以在租户内任何节点或代码中引用，系统初始内置的全局变量有${bizdate}。说明 出于数据安全考虑，账号密码类型的全局变量在此无法使用，将被视作本地变量，需要...
按线上API关联
根据已上线的API（服务）关联对应资源信息，手动选中目标服务后，系统自动选中API的归属应用、和API关联的物理表、和API...说明 全局配置是拉取当前工作组下所有的全局变量产生，因此，展示的数据应与工作组下的全局变量数量、信息完全一致。
加工引擎启动错误
错误日志 {"errorMessage":"ETL config doesn't pass security check,detail:invalid assign detected:variable_name"} 排查方法 检查SLS DSL规则中是否使用了变量定义赋值。根据错误日志中的 traceback 信息定位产生错误的位置。示例#错误...
逻辑表运行参数配置
参数值 全局变量：默认为全局变量所定义的变量值，不支持设置。更多信息，请参见 新建全局变量。空间名称变量：参数值即为空间名称，不支持设置。本地变量：最长支持256位字符或设置为空值。跨节点变量：设置上游依赖后，可以选择上游的跨...
逻辑表运行参数配置
参数值 全局变量：默认为全局变量所定义的变量值，不支持设置。更多信息，请参见 新建全局变量。空间名称变量：参数值即为空间名称，不支持设置。本地变量：最长支持256位字符或设置为空值。跨节点变量：设置上游依赖后，可以选择上游的跨...
使用DataWorks同步iGraph数据
配置节点调度属性：用于为任务配置阶段使用的变量赋值调度参数，您在上述配置中定义的变量均可以在此处进行赋值，支持赋值常量与变量。配置时间属性：用于定义任务在生产环境的周期调度方式。您可以在调度配置的时间属性区域，配置任务生成...
管理数据集
数据集是基于特定数据库和SQL查询生成，并且以二维表呈现的一种数据集合。本文介绍创建、编辑、删除数据集的方法。注意事项 数据分析后续所有的分析工作、仪表盘制作和大屏制作都是基于数据集进行的，因此在进行其他功能前，必须先创建数据...
实现数据筛选
本文以 柱状图 控制 轮播列表 组件数据更新为例，实现数字大屏中的自定义数据筛选。效果展示 操作步骤 登录 DataV控制...匹配柱状图x字段的值与全局变量静态值的type字段的值，实现数据筛选 }):[];单击页面右上角的 预览 图标，预览展示结果。
管理全局变量
全局变量可以理解为参数变量，用于控制组件之间参数的传递，从而达到交互的目的。例如图表联动、自定义字段等功能。说明 全局变量功能为7.0版本产品新增功能，请根据 新版控制台 环境进行操作。前提条件 已登录DataV控制台 已进入画布编辑...
数据归档
背景信息 ODC 支持定时将源数据库中的表数据归档至其它目标数据库中，以解决因线上数据增多影响查询性能与业务运作的问题。本文档旨在介绍如何通过提交数据归档工单实现归档数据。原理介绍 前提条件 归档的表中必须包含主键。注意事项 前置...
变量
配置变量为静态引用方式下的数据库类型，其中数据库类型分为PgSQL（功能强大的开源对象系统管理系统）、MySQL（关系类型数据库管理系统）、SqlServer（微软推出的关系数据库管理系统）2.配置数据库类型以及数据库的地址、端口数据库名称...
PolarDB Serverless实现了哪些突破
在国际数据库顶级会议2021 ACM SIGMOD上，一篇标题为《PolarDB Serverless:A Cloud Native Database for Disaggregated Data Centers》的论文，介绍了阿里云自研数据库 PolarDB 基于计算存储分离，实现的最新Serverless技术架构研究进展。...
赋值节点
使用不同赋值语言时，赋值节点的参数（outputs）输出格式不同，下游节点需要根据outputs的具体情况，以${参数名} 的格式，使用 一维数组 或 二维数组 的方式在代码中获取赋值节点传递的结果集、或结果集中的指定数据。赋值语言 outputs参数...
数据清理
背景信息 ODC 支持在源数据库中的数据归档到目标数据库后，删除源数据库中的数据，以提高数据库查询性能，降低在线存储成本。本文档旨在介绍如何通过提交数据清理工单实现归档数据。原理介绍 前提条件 清理的表中必须包含主键。注意事项 ...
变量中心
背景信息 变量含义：变量相较于常量而言是一个动态的计算过程，它使用输入参数按照一定的计算逻辑计算得到变量结果。在决策引擎中变量的计算逻辑支持：函数计算（例如：提取邮箱后缀）、调用业务场景识别模型（例如：调用注册风险识别-增强...
- 产品推荐
- 这些文档可能帮助您