同步时源库为PolarDB MySQL版的注意事项及限制
双向同步任务时，DTS会在目标库中建立数据库dts，以避免数据循环同步，任务运行期间，请勿修改该库。如双向同步任务的源实例或目标实例位于海外地域，则仅支持同地域的双向同步，不支持跨地域的双向同步。例如，支持日本地域间的双向同步，...
折线类常见问题
当数据系列数量多于配置项中的系列数量时，则将配置项中的系列循环渲染数据。下图中系列3使用了系列1的配置样式。下图中系列2为第一个数据，所以按配置项中第一个系列的样式渲染。当数据里没有 s 字段时，默认所有数据均为一个系列，即数据...
配置项常见问题
该配置项用于定义一组不同的样式数组，来循环渲染数据中的不同系列。如下图中配置项定义了两个系列，组件会使用['系列1','系列2']的样式，依次循环渲染数据中的 s 字段。常见误区 配置项中的 系列名 为该样式的名称，同时作为图表中图例的...
配置项常见问题
该配置项用于定义一组不同的样式数组，来循环渲染数据中的不同系列。如下图中配置项定义了两个系列，组件会使用['系列1','系列2']的样式，依次循环渲染数据中的 s 字段。常见误区 配置项中的 系列名 为该样式的名称，同时作为图表中图例的...
常用案例
本文通过设置数据源的六个实操案例介绍如何使用数据过滤器，帮您快速了解数据过滤器的相关配置。前提条件 已进入画布编辑器页面。案例一：数据格式转换 在 画布编辑器 页面，添加 环图 组件。单击右侧配置面板的数据 图标，进入数据设置页...
准备用于数据同步的数据库账号
无 双向同步任务对账号权限的要求 双向同步任务要求源和目标数据库具备如下权限，以允许DTS在源和目标数据库中创建库dts，用于做数据防循环复制。数据库 所需权限 创建及授权方式 RDS MySQL 高权限账号。创建数据库和账号。自建MySQL 待...
do-while节点逻辑原理介绍
DataWorks为您提供循环节点（do-while节点），您可根据业务需要重新编排循环节点内部业务流程，将需要循环执行的业务逻辑放入循环节点内部，并通过循环节点内部的End节点来定义循环条件，即确认不满足何种条件的情况下退出循环。循环节点可...
主备方案介绍
A：存储的是数据D1和数据D2中时间戳更大的数据，数据在LTS同步过程中不会改变数据原有的时间戳，一般情况下存储的是数据D2，但是由于主备实例不同可能存在时间戳毫秒级的时间差异造成数据D2的时间戳比数据D1的时间戳小，在这种情况下存储的...
RestAPI Reader最佳实践
数据集成RestAPI Reader插件提供了读取RESTful接口数据的能力，通过配置HTTP请求地址，可获取RestAPI类型的数据源数据（例如获取时间范围内的数据、获取分页数据、循环请求参数获取数据等），并转换为数据集成支持的数据类型，传递给下游...
DBCP 连接池连接 OceanBase 数据库示例程序
本文将介绍如何使用 DBCP 连接池、MySQL Connector/J 和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入、删除、更新和查询数据等。点击下载 dbcp-mysql-client 示例工程 前提条件 您已安装 OceanBase 数据库...
背景信息以及准备工作
在使用DLA对OSS中的历史数据按天进行清洗时，由于数据清洗的SQL是固定的，只是每次执行的时候需要传入不同的日期，因此我们可以通过DataWorks来循环调度DLA数据清洗任务。针对上述场景，我们需要在DataWorks中完成以下工作：部署一个赋值...
配置循环SQL节点
循环SQL节点可循环生成SQL语句，再将其分批提交给DMS管理的任意关系型数据库执行，同时，还可以搭配变量，控制SQL循环次数，达到简化SQL循环逻辑、平衡SQL语句对源库产生压力的目的。本文介绍配置循环SQL节点的操作步骤。背景信息 任务编排...
do-while节点最佳实践
本文为您介绍通过循环的方式依次处理一组数据的每一行的复杂场景。前提条件 请在操作前，先了解do-while节点逻辑，详情请参见 do-while节点逻辑原理介绍。背景信息 循环节点循环输出赋值节点结果集。需要部署一个上游节点，能够把查询出的...
数据分布策略
随机分布 DISTRIBUTED RANDOMLY 系统会按循环的方式将数据分布到各个计算节点上，但是相同值的数据可能不会分布到同一个计算节点。随机分布仅建议您在没有合适的列作为分布列时使用。建表语句示例如下：CREATETABLErandom_stuff(thingstext...
流式气泡层（v1.x版本）
流式气泡层是基础平面地图的子组件，支持独立的样式和数据配置，包括气泡的大小、位置、颜色、动画效果以及经纬度等，能够以流式气泡的形式表现地理位置上的点数据信息。本文介绍流式气泡层各配置项的含义。注意 当前为v1.x版本的流式气泡...
流式气泡层（v2.x版本）
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
PyODPS常见问题
Project上的安全策略禁止读取表中的数据，如果想使用全部数据，可以使用以下方法：联系Project Owner增加例外规则。使用DataWorks或其他脱敏工具先对数据进行脱敏，导出到非保护Project，再进行读取。如果只想查看部分数据，可使用如下方法...
Python SDK常见问题
Project上的安全策略禁止读取表中的数据，如果想使用全部数据，可以使用以下方法：联系Project Owner增加例外规则。使用DataWorks或其他脱敏工具先对数据进行脱敏，导出到非保护Project，再进行读取。如果只想查看部分数据，可使用如下方法...
数据资产管理
通过DMS的数据资产管理功能不仅能使数据资产可视、可用，同时可以确保数据资产的安全性，进而在企业经营过程中帮助企业挖掘数据价值，产生更多数据资产，形成正向循环。操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角...
for-each节点逻辑原理介绍
内置变量 含义 与for循环对比${dag.loopDataArray} 获取赋值节点的数据集 相当于for循环中的代码结果：data=[]${dag.foreach.current} 获取当前遍历值 以下面的for循环代码为例：for(int i=0;i;i+){ print(data[i]);} data[i]相当于${dag....
新增脱敏算法
敏感数据保护功能提供了哈希、遮掩、替换、变换、加密五类脱敏算法，您可以基于某个内置的脱敏算法自定义不同的脱敏规则，从而形成灵活、多样的脱敏策略。敏感数据保护功能中内置了一个全遮掩的脱敏规则，如果您需要其他的脱敏方式，可以...
设置RDS MySQL循环执行事件
当您需要在RDS MySQL中执行定时和周期性任务，例如定时发送统计报告、定时同步数据或定期清理过期数据等时，您可以使用事件调度（Event Scheduler）功能，根据预定计划自动执行数据库中定义的事件。本文介绍如何使用数据管理DMS为RDS MySQL...
使用do-while节点实现复杂的数据分析
综上所述，我们可以通过使用do-while循环节点进行12次循环来方便的计算每月的数据，同时使用3个SQL节点分别计算 近1月（30天）、近2月（60天）、近3月（90天）的数据。通过使用${dag.loopTimes} 来代表当前循环到第几个月，从而在SQL节点中...
管理数据看板
进入恢复模式 重要 当您编写的过滤器有问题（例如死循环导致的看板卡顿）、数据源配置有问题（例如返回的数据量过大导致的看板卡顿）或自定义组件有逻辑问题等其他原因导致数据看板无法编辑时，使用恢复模式进入，可以删除掉带来问题的内容...
OCS与数据库结合使用示例
看下面的代码片段，我们用for循环模拟用户连续20次在数据库中查询上述SQL语句：for(int i=1;i;i+){ String sql=“SELECT count()FROM testdb.tableone where region!‘beijing’”;String key=”non-beijing”;给SQL语句自定义一个key/在...
区域翻牌器（v3.0及以上版本）
说明 该配置项为一个数组，可配置多个系列，编辑器将遍历数据，使数据通过一个或多个系列配置循环渲染。若需要自定义某些数据为特定样式，则需要手动对数据进行排序。系列名：数据系列的命名，可自定义。字段为空时，系统会将组件数据中的 ...
轮播列表
说明 该配置项为一个数组，可配置多个自定义列，编辑器会遍历数据，使数据通过一个或多个自定义列配置循环渲染。若需要自定义某些数据为特定样式，则需要手动对数据进行排序。参数 说明 列字段名 自定义列所对应的字段名，需要与数据中的...
区域翻牌器（v3.0以下版本）
说明 该配置项为一个数组，可配置多个系列，编辑器将遍历数据，使数据通过一个或多个系列配置循环渲染。若需要自定义某些数据为特定样式，则需要手动对数据进行排序。系列名：数据系列的命名，可自定义。为空时，系统会将组件数据中的 s ...
配置do-while节点
DataWorks为您提供循环节点（do-while节点），您可以重新编排do-while节点内部的业务流程，将需要循环执行的逻辑写在节点内，再编辑end循环判断节点来控制是否退出循环。同时您也可以结合赋值节点来循环遍历赋值节点传递的结果集。本文通过...
实施步骤
由于每次循环中的值是递增的，所以最后输出的数据应该是 {dag.input[0]}、${dag.input[1]} 以此类推达到遍历数据集的效果。步骤六：设置end节点 end节点用于控制循环的结束，将 dag.loopTimes 和 dag.input.length 进行比较，dag.loopTimes...
慢日志分析
慢日志问题极大地影响数据库的稳定性，当数据库出现负载高、性能抖动等问题时，数据库管理员或开发首先会查看是否有慢日志在执行。数据库自治服务DAS（Database Autonomy Service）支持慢日志分析功能，会统计并分析数据库中执行时间超过...
备份SQL Server数据
RDS SQL Server支持自动备份和手动备份两种方式，您可以通过设置备份策略调整RDS数据备份和日志备份的周期实现自动备份，或手动备份数据。备份功能说明 数据备份 备份方式 功能说明 物理备份 支持全量物理备份和增量物理备份，暂不支持逻辑...
实现动态数据加和
选择 定时器 节点，在右侧配置面板中打开 是否循环，设置 延迟时间 为3秒。配置串行数据处理节点处理方法。A+变量B return[{ value:data[0].value+getCallbackValue("B")[0].value }]B+变量A return[{ value:data[0].value+...
BI分析功能简介
DataV的BI分析功能是基于DataV6.0迭代更新后的数据映射能力，通过简便实用的数据模型构建、视觉绑定和交互式动态数据查询，向用户提供探索数据间关系的能力，可以丰富可视化视图的创作模式，完善可视分析循环。本文介绍BI分析的基本概念。...
路径动画模型
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时，可单击右侧的 图标，实时查看数据响应结果。说明 还可将...
路径动画模型
在场景编辑器内配置路径动画模型的数据面板时，您还可以使用 空间构建数据源 获取空间地图上路径动画模型的数据，具体步骤如下：在图层配置面板中选择 数据 页签，单击面板下方的 数据源类型 下拉框，选择 空间构建数据源。在面板下方的 ...
概述
配置循环SQL节点 跨库Spark SQL 基于Spark引擎，实现大规模跨库数据传输和数据加工，主要针对各类跨库数据同步和数据加工场景。配置跨库Spark SQL节点 Lindorm Spark 通过Lindorm计算引擎高效地完成分布式计算任务，满足用户在数据生产、...
数据库
数据库基本信息 pg_stat_database pg_stat_database 视图将显示集群中每一个数据库中的每一行数据库范围的统计信息。相关参数信息如下表所示：参数 类型 描述 datid oid 数据库OID。datname name 数据库名称。numbackends integer 当前连接...
数据库
数据库基本信息 pg_stat_database pg_stat_database 视图将显示集群中每一个数据库中的每一行数据库范围的统计信息。相关参数信息如下表所示：参数 类型 描述 datid oid 数据库OID。datname name 数据库名称。numbackends integer 当前连接...
元表和字段资产详情
特殊的，若存在跨周期的循环依赖，则无法继续展开，需从起始节点继续查看下游。④ 对象详情区 鼠标悬停在表上，为您展示表的详情。数据源表：为您展示表的 名称、对象类型、存储类型、所属数据源、血缘来源。Dataphin数据表：为您展示表的 ...
- 产品推荐
- 这些文档可能帮助您