左边文本框为日志字段名称,右边为AnalyticDB MySQL数据库表中的字段。说明 Timestamp类型的字段映射精确到秒级别。例如日志时间为2022-01-05 10:12:13.145,投递到AnalyticDB MySQL后,投递结果为2022-01-05 10:12:13。投递开始时间 配置...
数据库名称 目标AnalyticDB for MySQL数据库的名字。表组名 目标AnalyticDB for MySQL中的表组。表名 目标AnalyticDB for MySQL中的表名,投递过来的日志数据将存储在该表中。AccessKey ID 当前阿里云账号的AccessKey ID,请参见 获取阿里...
说明 日志字段的值和RDS MySQL数据库表字段的值进行等值匹配时,如果RDS MySQL数据库表字段存在多个相同的值(例如RDS MySQL数据库表有多个值为 1 的 cid 字段。e_table_map函数只获取匹配到的第一行数据。e_table_map函数只支持单行匹配,...
以下列出了 AnalyticDB MySQL版 支持的客户端或ETL工具,以及这些客户端或工具与 AnalyticDB MySQL版 在数据库连通性、列举数据库、建表、查询表数据等方面的兼容性。客户端与 AnalyticDB MySQL版 兼容性 客户端 连接数据库 列举数据库 建...
大小表分开 为提升系统整体的性能和稳定性,用户应合理地将大表和小表拆分到不同的数据库中,HybridDB for MySQL适合存储大表,而将小表交给RDS for MySQL存储,大表可以使用sharding分区技术合理利用资源,而不影响小表。分区键高并发执行...
目标库表配置 的参数说明如下:参数名称 参数说明 库名 AnalyticDB for MySQL 集群 的数据库名称。表名 AnalyticDB for MySQL 集群的数据表名称。源端数据预览 单击 点击查看最近10条LogStore数据,可以查看源端SLS的10条数据。Schema字段...
目标库表配置 的参数说明如下:参数名称 参数说明 库名 AnalyticDB for MySQL 集群 的数据库名称。表名 AnalyticDB for MySQL 集群的数据表名称。源端数据预览 单击 点击查看最近10条LogStore数据,可以查看源端SLS的10条数据。Schema字段...
AnalyticDB MySQL 数据库自身具备强大的查询计算能力和计划缓存功能,无需依靠服务器端预处理语句获得大部分性能优势。AnalyticDB MySQL 数据库不建议使用服务器端预编译。大部分开发语言中支持通过配置开启客户端预编译(PrepareStatement...
MySQL 云原生数据仓库AnalyticDB MySQL 定义 ALTER DATABASE 不支持 修改数据库属性。ALTER EVENT 不支持 修改现有事件的一个或多个特征。ALTER FUNCTION 不支持 修改函数的定义。ALTER LOGFILE GROUP 不支持 修改日志文件组。ALTER ...
RAM用户与AnalyticDB MySQL数据库普通账号映射场景 SQL编辑器:使用RAM用户登录SQL编辑器,需要映射成 AnalyticDB MySQL 数据库普通账号进行库表鉴权。JDBC连接方式:使用 AnalyticDB MySQL 数据库普通账号登录,需要映射成RAM用户进行外表...
RAM用户与AnalyticDB MySQL数据库普通账号映射场景 SQL编辑器:使用RAM用户登录SQL编辑器,需要映射成 AnalyticDB MySQL 数据库普通账号进行库表鉴权。JDBC连接方式:使用 AnalyticDB MySQL 数据库普通账号登录,需要映射成RAM用户进行外表...
目标元数据配置 Schema名称 设置Schema名称,映射到 AnalyticDB MySQL 的数据库名称(默认每个发现任务会创建一个新的Schema)。数据库名称填写,需要注意如下两点:不能是 AnalyticDB MySQL 中已有的库名。不能与其他元数据任务的库名相同...
本文介绍如何通过 AnalyticDB MySQL 的外表将ECS自建MySQL数据库的数据导入至 AnalyticDB MySQL 数仓版(3.0)。前提条件 已创建与 AnalyticDB MySQL 集群相同地域、相同VPC的ECS实例。已在ECS实例中安装自建MySQL。已在ECS实例的安全组中...
AnalyticDB for MySQL 2.0支持基于数据库表的层级权限管理模型,提供类似MySQL的ACL授权模式。一个ACL授权由被授权的用户、授权对象和授予的对象权限组成。和MySQL不同的是,AnalyticDB for MySQL 2.0目前不支持针对用户在Host上授权。以下...
本文测试了FineBI 6.0与 AnalyticDB MySQL 在连通性、列举表、查看表数据等方面的...测试范围 连接FineBI 说明 此处应填写MySQL数据库的连接信息,而不是AnalyticDB for MySQL数据库连接信息。新建数据库连接 列举表 查看表结构 查看表数据
am-bp1xxxxxxxx47 SchemaName string 是 数据库名。adb_demo TableName string 是 表名。test 返回参数 名称 类型 描述 示例值 object AvgSize long 平均分区行数。0 RequestId string 请求 ID。1AD222E9-E606-4A42-BF6D-8A4442913CEF ...
本文介绍如何通过外表将云数据库RDS MySQL中的数据导入至 AnalyticDB MySQL。前提条件 RDS MySQL实例需与 AnalyticDB MySQL 集群位于同一个VPC,即所在专有网络的VPC ID相同。说明 登录 RDS控制台,单击实例ID,在 数据库连接 页面的 网络...
DescribeAdbMySqlTables 查询数据库下所有表信息 枚举AnalyticDB MySQL湖仓版(3.0)集群指定数据库下所有表信息。DescribeAdbMySqlSchemas 查询所有数据库列表 枚举指定AnalyticDB MySQL湖仓版(3.0)集群下所有数据库列表。GetViewDDL ...
数据准备 本文示例的RDS MySQL数据库名为 adb,并在该库中创建了一张名为 customer 的表,示例如下:CREATE DATABASE IF NOT EXIST adb;CREATE TABLE IF NOT EXISTS adb.customer(id int,name varchar(1023),address varchar(1023),age int...
本文介绍如何通过 AnalyticDB MySQL 数仓版(3.0)的外表导出数据至云数据库RDS MySQL。前提条件 RDS MySQL实例需与 AnalyticDB MySQL 集群位于同一个VPC,即所在专有网络的VPC ID相同。说明 登录 RDS控制台,单击实例ID,在 数据库连接 ...
对于修改字段类型的报错提示,可以通过以下两种方式解决问题:如果同步任务是整个数据库的同步操作,可以在AnalyticDB MySQL中新建一张表,表名不同于报错的表,表结构和源表的表结构保持一致,通过使用 Insert Into Select SQL语句将报错...
源库与目标库 源库的实例类型可以是RDS实例,或者是您自建的MySQL数据库。以RDS实例为例,选择待迁移实例的ID,输入对应的数据库账号及密码。说明 DTS现已支持RDS/MySQL向HybridDB for MySQL的 全量及增量数据同步。目标库选择 PetaData,...
返回结果:+-+|CAST(_id AS string)|+-+|641002ad883a73eb0d7291a7|+-+说明 如果要将ObjectId字段导入到 AnalyticDB MySQL 中,需要先创建用于存储ObjectId字段的数据库和数据表,具体操作,请参见 导入MongoDB非嵌套文档 中的步骤5~7。...
完成上述参数配置后,单击 测试连接 进行连通性测试,系统提示测试成功后,即可连接至指定的 AnalyticDB MySQL 数据库。使用永洪BI 通过永洪BI连接 AnalyticDB MySQL 集群后,您就可以获取 AnalyticDB MySQL 中的数据,然后通过永洪BI制作...
为满足高QPS,从设计上采用大宽表、冗余字段,并且避免表关联。字段名 字段类型 说明 mail_id varchar 邮件订单唯一码 scan_timestamp timestamp 收件时间 biz_date bigint 日期(二级分区)dlv_person_name varchar 投递员名称 rg_code ...
TABLE_PROPERTIES AnalyticDB MySQL 访问自建MySQL数据库的访问方式。url ECS实例的 主私网IP(即VPC地址)和目标库名(本文示例中为 test_adb)。查看步骤如下:登录 ECS管理控制台 并找到目标实例。在 实例详情 页签的 网络信息 区域,...
阿里云从业务扩展性、数据流动性、服务高可用三方面入手,通过多款云数据库产品为利楚扫呗制定聚合支付方案,解决利楚扫呗在业务扩展期遇到的数据存储空间不足、读写性能下降以及大数据分析空缺等问题。业务痛点 武汉利楚商务服务有限公司...
本文测试了DBVisualizer 10.0.24 版本与 AnalyticDB MySQL 在连通性、列举数据库、创建表等方面的兼容性,并给出测试结果图。测试环境 Java MySQL java version"1.8.0_161"Java(TM)SE Runtime Environment(build 1.8.0_161-b12)Java ...
本文测试了DBeaver 6.1.2 Community Edition版本与 AnalyticDB MySQL 在连通性、列举数据库、创建表等方面的兼容性,并给出测试结果图。测试环境 Java MySQL AnalyticDB MySQL DBeaver java version"1.8.0_161"Java(TM)SE Runtime ...
数据库名称 从下拉列表中选择目标 AnalyticDB MySQL 数据库名。表名 从下拉列表中选择目标 AnalyticDB MySQL 表名。账号名称 目标 AnalyticDB MySQL 中创建的 数据库账号。账号密码 填写账号名称对应的密码。字段映射 系统自动提取日志服务...
问题描述 RDS产品的MySQL数据库创建索引报如下错误。Identifier name 'XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX' is too long 问题原因 因为 MySQL数据库 对外键和索引等名称的长度有限制,具体如下:Identifier...
本文测试了Navicat Premium 12.1.27版本与 AnalyticDB MySQL 在连通性、列举数据库、创建表等方面的兼容性,并给出测试结果图。测试环境 Java MySQL Navicat Premium java version"1.8.0_161"Java(TM)SE Runtime Environment(build 1.8.0_...
表扫描数据量倾斜 问题 AnalyticDB MySQL版 是分布式执行架构,大表的数据一般需要指定分布字段,数据写入时根据分布字段分散到不同的存储节点上。如果分布字段的值分布不均匀,那么数据存储在各个节点上时也会不均匀,最终导致数据读取时...
查看库表结构 在 SQL开发 页面的 库表 页签查看系统库表INFORMATION_SCHEMA、自动创建的库表(例如,通过实时数据接入同步到 AnalyticDB MySQL 的库表)及手动创建的库表,并可以通过下拉按钮切换库。选择引擎和资源组 通过选择不同的引擎...
对数据做兼容加工处理 如果表的字段没有设置默认值,生成的字段值默认是NULL。使用管道符“|”作为字段分隔符的时候,“a,NULL,c,d,NULL”导出到文本文件是“a|c|d|”的格式,在使用LOAD DATA的方法导入AnalyticDB的时候,会产生报错提示...
HybridDB for MySQL数据库兼容MySQL协议,您可以通过MySQL客户端或程序访问HybridDB for MySQL数据库,也可以使用阿里云的DMS登录数据库。前提条件 已通过HybridDB for MySQL管理控制台创建实例及数据库,待状态显示为 运行中,则数据库...
“数据传输”导入 事务引擎/分析引擎 使用数据传输(Data Transmission Service)将自建MySQL数据库或者RDS for MySQL数据库迁移到HybridDB for MySQL中。从MySQL批量导入导出 分析引擎 HybridDB for MySQL支持从自建MySQL中全量导入和导出...
前提条件 已创建 湖仓版(3.0)集群。详情请参见 创建集群。Spark作业权限说明 提交Spark作业,需要具备以下三种权限。AliyunADBFullAccess:管理 AnalyticDB MySQL 集群的权限。...相关文档 访问RDS MySQL数据源 访问OSS数据源
概述 本文主要介绍数据同步过程中源实例的数据库名、表名、列名是否可以包含横线(-)符号。详细信息 阿里云提醒您:如果您对实例或数据有修改、变更等风险操作,务必注意实例的容灾、容错能力,确保数据安全。如果您对实例(包括但不限于...
登录 云原生数据仓库AnalyticDB MySQL控制台,在集群 监控信息 页的 表信息统计 页签下查看表大小等信息。监控信息页面看到热数据使用量比总数据使用量还多,是什么原因?AnalyticDB for MySQL 集群中包含多个存储节点,磁盘数据使用量是指...