通过任务编排实现跨库数据同步

前提条件 准备一个MySQL数据库作为在线库,用于存放订单和商品,且您拥有该数据库的变更权限。如需申请权限,请参见 DMS访问控制权限概述。准备一个AnalyticDB MySQL数据仓库,用于数据加工,且您拥有该数据仓库的变更权限。如需申请...

基本数据库对象及概念

是否支持将表从一个组移到另一个表组?暂不支持。是否支持修改名?暂不支持。是否支持修改的一级分区数?当前不支持动态修改,只能删重建。如何选取普通的一级分区数以达到最佳计算性能和数据存储均匀分布?AnalyticDB MySQL版 ...

创建

组是一系列可发生关联的数据的集合,分析型数据库MySQL版(AnalyticDB MySQL版)为管理相关联的数据,引入组的概念。说明 创建 AnalyticDB MySQL版 数据库时,系统自动创建维度组。注意事项 组名以字母开头,字母或数字结尾...

OceanBase(MySQL模式)迁移至RDS MySQL

若您列名仅大小写不同的字段写入到目标MySQL数据库的同一个表中,可能会因为MySQL数据库列名大小写不敏感,导致迁移结果不符合预期。在数据迁移完成后,建议使用 analyze table<名>命令检查数据是否已写入目标。例如,在MySQL触发HA...

从MySQL批量导入导出

HybridDB for MySQL支持直接从MySQL中全量导入和导出数据,这也是HybridDB for MySQL的功能之一,相比较借助DTS、Kettle等工具,HybridDB for MySQL直通导入和导出节省了大量的中间转换,导入导出的速度要快10倍以上。导入准备 将数据从...

通过日志服务导入至数仓版

左边文本框为日志字段名称,右边为AnalyticDB MySQL数据库表中的字段。说明 Timestamp类型的字段映射精确到秒级别。例如日志时间为2022-01-05 10:12:13.145,投递到AnalyticDB MySQL后,投递结果为2022-01-05 10:12:13。投递开始时间 配置...

Smartbi

本文列出了Smartbi与 AnalyticDB MySQL版 在连通性、列举数据库查询表数据等方面的兼容性。测试环境 Smartbi试用地址为 登录Smartbi。如何通过Smartbi连接 AnalyticDB MySQL版 集群,请参见 Smartbi。测试范围 连接 AnalyticDB MySQL版 ...

CREATE TABLEGROUP(2.0版)

AnalyticDB MySQL版 2.0 CREATE ...同一个数据库中,组名唯一。维度组由系统创建,组命名为dbname_dimension_group。示例 创建TRADE组,存放交易。示例如下:create tablegroup trade;相关文章 通过DMS界面创建组 名词解释

DELETE

删除是指单个SQL语句进行多关联查询,并在一个表中删除满足WHERE子句指定条件的数据。单删除 DELETE FROM table_name[WHERE condition]多删除 重要 仅3.2.0.0及以上内核版本的集群支持多删除。如何查看集群内核版本,请参见 ...

创建 CREATE TABLE 的不兼容点

本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时,MySQL 数据库执行的 CREATE TABLE DDL 支持被数据传输的 DDL 同步组件转换,但 OceanBase 数据库 MySQL 租户不支持执行的场景。在生成列的基础上再定义生成列 通过 ...

迁移方案概览

源库或目标库为RDS MySQL数据库的链路,支持RDS MySQL Serverless实例;源库或目标库为RDS PostgreSQL数据库的链路,仅目标库支持RDS PostgreSQL Serverless实例。通过 云数据库专属集群MyBase 创建的数据库实例,接入方式 为 云实例 时...

通过一键建仓同步至数仓版

PolarDB MySQL数据库中已存在数据。计费 一键创建PolarDB MySQL数据仓库时,系统自动通过DTS同步数据,DTS计费规则,请参见 计费概述。注意事项 数据同步过程中,若在源实例PolarDB MySQL中新增库,新增库数据不会自动同步,手动配置同步...

创建RDS MySQL数据库

本文档为您介绍创建RDS MySQL数据库表的具体步骤。操作步骤 登录阿里云 云数据库RDS控制台。单击 创建实例,创建RDS MySQL实例。单击RDS MySQL实例链接,进入 基本信息 页面。说明 您需要记录RDS MySQL实例的内网和外网地址,后面在DataV中...

同步方案概览

源库或目标库为RDS MySQL数据库的链路,支持RDS MySQL Serverless实例;源库或目标库为RDS PostgreSQL数据库的链路,仅目标库支持RDS PostgreSQL Serverless实例;暂不支持云消息队列Kafka版Serverless系列实例。通过 云数据库专属集群...

RDS MySQL数据库获取数据进行数据富化

日志服务数据加工功能支持阿里云RDS MySQL数据库获取数据,结合数据加工规则,进行数据富化。背景信息 在数据存储场景中,您可能经常遇到数据分散存储的问题,例如用户操作、行为等相关数据存储在日志服务中,用户属性、注册信息等相关...

通过一键建仓同步至数仓版

RDS MySQL数据库中已存在数据。计费 一键创建RDS MySQL数据仓库时,系统自动通过DTS同步数据。DTS计费规则,请参见 计费概述。注意事项 数据同步过程中,若在源实例RDS MySQL中新增库,新增库数据不会自动同步,需要手动配置同步链路,请...

OCS与数据库结合使用示例

beijing,Value=7 OCS中读取数据.Key=non-beijing,Value=7 OCS中读取数据.Key=non-beijing,Value=7 …… …… 结果可以看出,程序第1次是从MySQL数据库当中查询数据,后面的19次都是OCS缓存中获取key对应的value直接返回。...

数据归档

背景信息 ODC 支持定时数据库中的数据归档至其它目标数据库中,以解决因线上数据增多影响查询性能与业务运作的问题。本文档旨在介绍如何通过提交数据归档工单实现归档数据。原理介绍 前提条件 归档的中必须包含主键。注意事项 前置...

RDS MySQL或自建MySQL逻辑备份

异地备份 支持将MySQL数据库备份到另一个地域(目标地域),并恢复到目标地域、源地域或其他地域的云数据库MySQL或自建MySQL上。长期归档 支持备份集保留长达10年,备份集自动转移到归档存储。细粒度备份 支持多库、单库或单备份。备份...

从MySQL导入数据

说明 如果您导入的是本地,请将查询语句中的分布式名 clickhouse_test_table_distributed 更换为本地名 clickhouse_test_table,再进行查询。查询结果如下。数据类型映射 RDS MySQL或PolarDB MySQL类型 ClickHouse类型 Unsigned ...

概览

此工具的原理是,同时连接源端MySQL数据库和目的端数据库,MySQL库中通过查询得到要导出的数据,然后通过COPY命令导入到目的端。暂不支持 rds_dbsync迁移/同步PostgreSQL数据到AnalyticDB PostgreSQL 开源工具rds_dbsync的pgsql2pgsql...

自建MySQL迁移至PolarDB-X

说明 如果您的自建MySQL数据库进行了白名单安全设置,您需要在 实例地区 配置项后,单击 获取DTS IP段 来获取到DTS服务器的IP地址,并将获取到的IP地址加入自建MySQL数据库的白名单安全设置中。数据库类型 选择 MySQL。主机名或IP地址 填入...

概述

3 创建 MySQL 数据库 在 tutorial_mysql 租户下,创建 tutorial_database 数据库。4 创建账号(MySQL 数据库用户)云数据库 OceanBase MySQL 租户下的账号即为 MySQL 数据库用户,接下来我们为tutorial_database 数据库创建一个超级账号 ...

概述

Federated引擎允许您访问远程 PolarDB MySQL版 集群或社区MySQL数据库中的数据,而无需使用复制或集群技术。本地Federated中未存储任何数据,查询本地Federated会通过远程方式提取远程数据。当您使用 PolarDB MySQL版 或社区MySQL...

联合查询多个MySQL实例

步骤三:通过DLA联合查询多个MySQL实例数据 MySQL数据库连接和外表创建成功后,接下来您可以通过MySQL客户端或者MySQL命令行工具连接DLA,使用标准SQL语句操作MySQL数据库数据。也可以直接在 DMS for Data Lake Analytics 中操作MySQL数据...

配置MySQL输入组件

来源量包括 单 和 多:单:适用于将一个表的业务数据同步至一个目标的场景。多:适用于多个的业务数据同步至同一个目标的场景。多个数据写入同一个数据表时,使用union算法。更多union说明,请参见 交集(INTERSECT...

数据导出到MongoDB

将数据从HybridDB for MySQL导出到MongoDB中需要如下三个步骤:在HybridDB for MySQL中建立导出数据的真实存储 在HybridDB for MySQL中建立一张外表映射到MongoDB 调用 INSERT INTO SELECT 来完成数据导出 操作步骤 在HybridDB for MySQL...

设置连接池

如果您的应用连接创建频繁(例如短连接场景)或者连接数量很大(大于MySQL数据库的连接数限制),您可以参考本文使用合适的RDS MySQL数据库代理连接池,降低应用与数据库建立连接的频率来减少MySQL数据库主线程的开销,减少数据库上的总...

使用ClickHouse-Local迁移上云

clickhouse local 示例1:使用集成引擎MySQL迁移到云数据库ClickHouse企业版 您可以使用集成引擎(通过MySQL函数动态创建)MySQL数据库读取数据,并使用remoteSecure函数数据写入云数据库ClickHouse企业版集群上的目标。...

自建MySQL迁移至RDS实例

说明 如果您的自建MySQL数据库具备白名单安全设置,您需要在 实例地区 配置项后,单击 获取DTS IP段 来获取DTS服务器的IP地址,然后将获取到的IP地址加入自建MySQL数据库的白名单安全设置中。数据库类型 选择 MySQL。主机名或IP地址 填入自...

迁移工具

将MySQL数据同步迁移到表格存储 HBase数据同步到表格存储 MaxCompute数据同步到表格存储 表格存储数据同步到MaxCompute 表格存储数据同步迁移到OSS 表格存储数据中数据同步到另一个数据 表格存储时序中数据同步到另一个...

迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL ...

源端 目标端 MySQL(RDS 实例)OB_MySQL MySQL(PolarDB 实例)OB_MySQL MySQL(VPC 内自建数据库)OB_MySQL MySQL数据库网关)OB_MySQL MySQL(公网 IP 自建数据库)OB_MySQL 数据类型映射 MySQL 数据库 OceanBase 数据库 MySQL 租户 ...

通过一键建仓同步至数仓版

数据库名称 下拉列表中选择目标 AnalyticDB MySQL 数据库名。下拉列表中选择目标 AnalyticDB MySQL 名。账号名称 目标 AnalyticDB MySQL 中创建的 数据库账号。账号密码 填写账号名称对应的密码。字段映射 系统自动提取日志服务...

概述

用户使用流程 数据湖构建帮助您快速简洁抽取源数据到统一数据湖的服务,用户使用流程如下:开通公测流程后,登录阿里云管理控制台,选择 数据湖构建,进入 数据湖管理控制台。参见 数据源管理 章节,创建数据源,选择希望导入到数据湖的...

使用资源函数增量获取数据

本文介绍如何使用res_rds_mysql函数增量获取RDS MySQL数据库中的数据。前提条件 日志服务 已上传数据到日志服务源Logstore中。具体操作,请参见 数据采集。已创建日志服务目标Logstore。具体操作,请参见 创建Logstore。如果您使用的是RAM...

QlikView(2.0版)

通过QlikView连接AnalyticDB for MySQL 在安装QlikView的主机上,进入 控制面板>系统和安全>管理工具>数据源(ODBC)(操作系统不同,此步骤可能不同),新建一个DSN,数据源选择 MySQL ODBC 5.xx Driver。详细的参数配置如下所示。参数 ...

API概览

DescribeAdbMySqlTables 查询数据库下所有信息 枚举AnalyticDB MySQL湖仓版(3.0)集群指定数据库下所有信息。DescribeAdbMySqlSchemas 查询所有数据库列表 枚举指定AnalyticDB MySQL湖仓版(3.0)集群下所有数据库列表。GetViewDDL ...

自建MySQL数据导入

本文介绍如何通过 AnalyticDB MySQL 的外表ECS自建MySQL数据库的数据导入至 AnalyticDB MySQL 数仓版(3.0)。前提条件 已创建与 AnalyticDB MySQL 集群相同地域、相同VPC的ECS实例。已在ECS实例中安装自建MySQL。已在ECS实例的安全组中...

FineBI

检查外接MySQL数据库是否使用utf8(– UTF-8 Unicode)编码为字符集排列规则,或新建一个utf8编码的数据库 create database finedb character set utf8。配置外接数据库为AnalyticDB,连接失败 处理方法:外界数据库需要配置本地MySQL,而...

配置AnalyticDB for MySQL 3.0输入组件

来源量包括 单 和 多:单:适用于将一个表的业务数据同步至一个目标的场景。多:适用于多个的业务数据同步至同一个目标的场景。多个数据写入同一个数据表时,使用union算法。更多union说明,请参见 交集(INTERSECT...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 云数据库 Redis 版 云数据库 RDS 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用