管理健康报告
例如，对于以下两个SQL语句，当它们经过参数化处理后，它们属于同一类SQL。原始SQL SELECT*FROM orders WHERE customer_id=10 AND quantity>20 SELECT*FROM orders WHERE customer_id=20 AND quantity>100 参数化后SQL SELECT*FROM orders ...
UDF（SQL自定义函数）
c0|_c1|+-+-+|2|1|3|2|+-+-+示例中定义了两个SQL UDF：函数 add 的入参为一个BIGINT类型的参数。函数 op 定义了2个输入参数。一个为BIGINT类型的入参@a。另一个为函数类型的入参@fun，且@fun 的输入和输出均为BIGINT类型。函数 op 将@a ...
SQL限流（rds_ccl）
例如：以下两个sql的query_id相同 SELECT*FROM tbl WHERE a=1;SELECT*FROM tbl WHERE a=2;query_id 包含有SQL中对象的信息（即 oid 信息），不同数据库下的同名表不是同一个对象，不同schema下的同名表也不是同一个对象。所以相同的SQL，...
SQL限流（rds_ccl）
例如：以下两个sql的query_id相同 SELECT*FROM tbl WHERE a=1;SELECT*FROM tbl WHERE a=2;query_id 包含有SQL中对象的信息（即 oid 信息），不同数据库下的同名表不是同一个对象，不同schema下的同名表也不是同一个对象。所以相同的SQL，...
【活动/调价】RDS SQL Server 2008 R2本地盘升级补贴
例如您有两个RDS SQL Server 2008 R2本地盘实例都完成了升级，阿里云将在一周时间内为您的阿里云账号发放200 x 2=400元代金券。代金券自发放后180天内有效，您可在 用户中心 的 代金券管理 处查看。代金券支持抵扣所有RDS包年包月计费项，...
SQL表达式
如果以上两个示例SQL对应的规则需将数据流转到表格存储的数据表中，主键对应的值可分别配置为：${t}、${deviceName} 和${loaction}。{deviceName}、${Humidity} 和${Temperature}。数组使用说明 数组表达式需要使用双引号，用$.表示取...
从自建TiDB同步至云原生数据仓库AnalyticDB MySQL
如果需要让部分表执行多表归并，另一部分不执行多表归并，您可以创建两个数据同步作业。同步操作类型 根据业务选中需要同步的操作类型，支持的同步操作详情请参见 支持同步的SQL操作，默认情况下都处于选中状态。选择同步对象 在 源库对象 ...
如何查看RDS SQL Server实例的常用参数值
SQL Server中有两个系统参数表，分别为服务器的sys.configurations参数表和数据库的sys.databases参数表。本文以查看Ole Automation Procedures参数的状态为例。使用客户端连接实例，请参见 连接实例。单击 新建查询，在SQL窗口执行如下...
从RDS同步至MaxCompute
您可以通过MaxCompute的SQL命令，对这两个表执行合并操作，得到某个时间点的全量数据。本案例以customer表为例（表结构如下），介绍操作流程。根据源库中待同步表的结构，在MaxCompute中创建用于存储合并结果的表。例如，需要获取customer...
从RDS同步至MaxCompute
您可以通过MaxCompute的SQL命令，对这两个表执行合并操作，得到某个时间点的全量数据。本案例以customer表为例（表结构如下），介绍操作流程。根据源库中待同步表的结构，在MaxCompute中创建用于存储合并结果的表。例如，需要获取customer...
PolarDB-X 2.0同步至MaxCompute
若同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000时，建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。Binlog日志：在PolarDB-X 2.0控制台参数设置...
准备工作
在用户映射页面，选择需要备份的数据库，然后勾选db_backupoperator和db_owner两个数据库角色成员身份，单击确认。以SQL Server 2008 R2为例。开启SQL Server和Windows身份验证模式。右键单击服务器对象，单击属性。进入安全性页面，选择...
从RDS SQL Server同步至云原生数据仓库AnalyticDB ...
如果需要让部分表执行多表归并，另一部分不执行多表归并，您需要创建两个数据同步作业。选择为 否：默认选项。同步操作类型 根据业务选中需要同步的操作类型，默认情况下都处于选中状态。选择同步对象 在 源库对象 框中单击待迁移的对象，...
从RDS SQL Server同步至云原生数据仓库AnalyticDB ...
如果需要让部分表执行多表归并，另一部分不执行多表归并，您需要创建两个数据同步作业。选择为 否：默认选项。同步操作类型 根据业务选中需要同步的操作类型，默认情况下都处于选中状态。选择同步对象 在 源库对象 框中单击待迁移的对象，...
MySQL实例间的双向同步
数据传输服务DTS（Data Transmission Service）支持两个MySQL数据库之间（比如RDS MySQL、自建MySQL）的双向数据实时同步，适用于异地多活（单元化）、数据异地容灾等多种应用场景。本文以RDS MySQL实例为例，介绍双向数据同步的配置步骤，...
从ECS上的自建SQL Server同步至云原生数据仓库...
如果需要让部分表执行多表归并，另一部分不执行多表归并，您需要创建两个数据同步作业。选择为 否：默认选项。同步操作类型 根据业务选中需要同步的操作类型，默认情况下都处于选中状态。选择同步对象 在 源库对象 框中单击待迁移的对象，...
从ECS上的自建SQL Server同步至云原生数据仓库...
如果需要让部分表执行多表归并，另一部分不执行多表归并，您需要创建两个数据同步作业。选择为 否：默认选项。同步操作类型 根据业务选中需要同步的操作类型，默认情况下都处于选中状态。选择同步对象 在 源库对象 框中单击待迁移的对象，...
MySQL整库同步Kafka
对于以上两个SQL任务，user表在两个作业中都被使用了一次。运行时，两个作业都会读取MySQL的全量数据和增量数据。全量读取需要创建MySQL连接，增量读取需要创建Binlog Client。随着作业的不断增多，MySQL连接和Binlog Client资源也会对应...
配置数据层
双向同步：目前DTS仅支持两个数据库之间的双向同步。说明 关于同步架构的更多信息，请参见 数据同步拓扑介绍。双向同步 同步任务单元 同步任务归属的单元，同步任务会默认创建在目标实例所在的地域。杭州中心单元 创建同步任务方式 包括...
PolarDB MySQL版间的双向同步
数据传输服务DTS（Data Transmission Service）支持两个 PolarDB MySQL版 集群间的双向数据同步，适用于异地多活、异地容灾等多种应用场景。本文介绍双向数据同步的配置步骤。前提条件 已购买源和目标 PolarDB MySQL版 集群（简称PolarDB...
PolarDB MySQL版间的双向同步
数据传输服务DTS（Data Transmission Service）支持两个 PolarDB MySQL版 集群间的双向数据同步，适用于异地多活、异地容灾等多种应用场景。本文介绍双向数据同步的配置步骤。前提条件 已购买源和目标 PolarDB MySQL版 集群（简称PolarDB...
配置数据层
双向同步：目前DTS仅支持两个MySQL数据库之间的双向同步。说明 关于同步架构的更多信息，请参见 数据同步拓扑介绍。双向同步 同步任务单元 同步任务归属的单元，同步任务会默认创建在目标实例所在的地域。杭州中心单元 创建同步任务方式 ...
自建Oracle同步至云原生数据仓库AnalyticDB ...
数据传输服务DTS（Data Transmission Service）支持将自建Oracle同步至 云原生数据仓库AnalyticDB PostgreSQL版，帮助您构建实时数仓。前提条件 自建Oracle数据库的版本为9i、10g、11g、12c、18c或19c版本。自建Oracle数据库已开启...
Presto FAQ
异步执行主要针对ETL类SQL(INSERT.SELECT.)，这种SQL耗时较长，如果使用同步执行，那么这段时间客户端与服务器端之间的连接会始终被占用，如果有网络异常还会导致查询失败。而异步执行则是提交SQL之后立即返回一个ID，后续只需使用 SHOW ...
自建Oracle同步至云原生数据仓库AnalyticDB ...
如果需要让部分表执行多表归并，另一部分不执行多表归并，您需要创建两个数据同步任务。警告 源库请勿执行库或表结构变更的DDL操作，否则会导致数据不一致或者同步任务失败。选择为 否：默认选项。实例级别选择所需同步的DDL和DML 按实例...
租户参数列表说明
sql_throttle_cpu CPU 使用率超过这个值的时候，将不执行这个 SQL。error_on_overlap_time 动态参数，设置夏令时重叠区时间发生歧义时是否作报错处理。interactive_timeout 服务器关闭交互式连接前等待活动的秒数。交互式客户端定义为在 ...
使用DataX同步
capacity和byteCapacity两个参数决定了每个channel能缓存的记录数量和内存占用情况。如果要调整相应参数，您需要按照DataX实际的运行环境进行配置。例如MySQL中每个record都比较大，那么可以考虑适当调高byteCapacity，调整该参数时还请...
新功能发布记录
设置存储自动扩容 访问地址优化 支持多机房部署方案添加两个访问地址。当访问地址为 2 个时，仅支持只读地址。当访问地址为 1 个时，地址类型可为只读或可读可写。添加访问地址 租户规格下限变更 集群实例中的租户规格下限调整，V3.x 以上...
一键MaxCompute Merge任务节点问题排查方案
离线任务节点 一键实时同步到MaxCompute流程执行完成后，数据集成会在DataStudio中生成离线任务节点，如图所示，主要有三个节点：checkStreamXDone：检查增量消费位点，确认前一天的增量分区数据是否已经同步完成，只有增量同步完成后才...
如何限流慢SQL
允许单个节点可以同时有两个这样的SQL在执行 也可使用 实例会话 页面里的SQL限流功能，进行如下操作：如果希望这个SQL模板的SQL执行的时候可以慢，但尽量不要出错，则可以设置等待队列和等待超时时间（默认为600秒）：CREATE CCL_RULE `...
RDS PostgreSQL间的双向同步
数据传输服务DTS（Data Transmission Service）支持两个PostgreSQL数据库之间（比如RDS PostgreSQL、自建PostgreSQL）的双向数据实时同步，RDS PostgreSQL 实例间的双向同步，适用于异地多活（单元化）、数据异地容灾等多种应用场景。...
数据迁移、同步和恢复区别
数据同步主要用于两个数据源之间的数据实时同步，适用于异地多活、数据灾备、跨境数据同步、查询与报表分流、云BI及实时数据仓库等场景。它属于持续性任务，任务创建后会一直同步数据，保持数据源和数据目标的数据一致性。
RDS PostgreSQL间的双向同步
数据传输服务DTS（Data Transmission Service）支持两个PostgreSQL数据库之间（比如RDS PostgreSQL、自建PostgreSQL）的双向数据实时同步，RDS PostgreSQL 实例间的双向同步，适用于异地多活（单元化）、数据异地容灾等多种应用场景。...
CREATE TABLE AS（CTAS）语句
通过CTAS语句，在实时同步数据的同时，还能实时将上游表结构（Schema）的变更同步到下游表，提高您在目标存储中创建表和维护源表结构变更的效率。本文为您介绍CREATE TABLE AS（CTAS）的使用方法，并提供了多种使用场景下的示例。前提条件 ...
从PolarDB MySQL版同步至云原生数据仓库 AnalyticDB ...
如果需要让部分表执行多表归并，另一部分不执行多表归并，您可以创建两个数据同步作业。同步操作类型 根据业务选中需要同步的操作类型，支持的同步操作详情请参见 支持同步的SQL操作，默认情况下都处于选中状态。选择同步对象 在 源库对象 ...
从PolarDB MySQL版同步至云原生数据仓库AnalyticDB ...
如果需要让部分表执行多表归并，另一部分不执行多表归并，您可以创建两个数据同步作业。同步操作类型 根据业务选中需要同步的操作类型，支持的同步操作详情请参见 支持同步的SQL操作，默认情况下都处于选中状态。选择同步对象 在 源库对象 ...
PolarDB-X 1.0同步至云原生数据仓库 AnalyticDB MySQL...
如果需要让部分表执行多表归并，另一部分不执行多表归并，您需要创建两个数据同步任务。警告 源库请勿执行库或表结构变更的DDL操作，否则会导致数据不一致或者同步任务失败。选择为 否：默认选项。目标库对象名称大小写策略 您可以配置目标...
从RDS同步到云原生数据仓库 AnalyticDB MySQL 版
如果需要让部分表执行多表归并，另一部分不执行多表归并，您可以创建两个数据同步作业。同步操作类型 根据业务选中需要同步的操作类型，支持的同步操作详情请参见 支持同步的SQL操作，默认情况下都处于选中状态。选择同步对象 在 源库对象 ...
从RDS同步到云原生数据仓库AnalyticDB MySQL
如果需要让部分表执行多表归并，另一部分不执行多表归并，您可以创建两个数据同步作业。同步操作类型 根据业务选中需要同步的操作类型，支持的同步操作详情请参见 支持同步的SQL操作，默认情况下都处于选中状态。选择同步对象 在 源库对象 ...
从PolarDB-X同步至云原生数据仓库 AnalyticDB MySQL ...
如果需要让部分表执行多表归并，另一部分不执行多表归并，您可以创建两个数据同步作业。同步操作类型 根据业务选中需要同步的操作类型，默认情况下都处于选中状态。Insert Update Delete 选择同步对象 在 源库对象 框中单击待同步的表，...
- 产品推荐
- 这些文档可能帮助您