云数据库MongoDB版（单节点架构）全量迁移至云数据库...
源数据库（单节点架构）目标数据库（所有架构）云数据库MongoDB版 云数据库MongoDB版 ECS上的自建数据库 ECS上的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 有公网IP的自建数据...
云数据库MongoDB版（单节点架构）全量迁移至云数据库...
源数据库（单节点架构）目标数据库（所有架构）云数据库MongoDB版 云数据库MongoDB版 ECS上的自建数据库 ECS上的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 有公网IP的自建数据...
常见问题
RDS 到云搜同步任务，创建成功后，目的端无数据写入 解决方法：查看源端 RDS 表是否有数据，同步任务会先同步历史全量数据，再拉取增量数据写入云搜；检查 RDS 表是否设置了主键，未设置主键将导致数据无法正常写入目的端。
基础术语
中文 释义 数据抓取延迟 数据抓取延迟是指数据同步服务抓取数据并写入产品存储的时间与数据实际写入至源数据库的时间差。数据抓取延迟仅在增量同步阶段有数值。数据写入延迟 数据写入延迟是指同步到目标实例的最新数据在源数据库执行的时间...
管理数据架构待发布对象
导入的发布包文件中存在数据架构变更对象时，将在待发布数据架构页面为您展示，您可在待发布数据架构页面对数据架构对象进行管理和发布。前提条件 数据架构对象所在的数据板块已经发布。待发布数据架构对象入口 请参见 发布包总览入口，...
管理数据架构待发布对象
导入的发布包文件中存在数据架构变更对象时，将在待发布数据架构页面为您展示，您可在待发布数据架构页面对数据架构对象进行管理和发布。前提条件 数据架构对象所在的数据板块已经发布。待发布数据架构对象入口 请参见 发布包总览入口，...
产品架构
典型应用架构 根据使用场景不同，表格存储 有互联网应用架构、数据湖架构和物联网架构三种典型应用架构。互联网应用架构 互联网应用架构包括数据库分层架构和分布式结构化数据存储架构，主要用于电商订单、直播弹幕、网盘中文件元数据、...
创建ID
进入 规划 页面后，默认进入 数据架构 页面。在 数据架构 页面，单击 标签架构。在标签架构页面，按照下图操作指引，选择 ID管理 页签，并 单击 新增ID。在 创建ID 对话框中，配置ID相关信息。参数 描述 ID名称 填写ID名称。允许中英文、...
查看磁盘详情
您可以在 磁盘 页查看已有的系统盘或数据盘信息。前提条件 已添加云服务器 ECS。操作步骤 登录资源管理控制台。在左侧导航栏单击 计算和网络>云服务器 ECS。在 磁盘 标签页，查看以下信息：基本信息：包括名称/ID、描述、服务器（挂载点）...
应用场景
本地IDC/跨云数据库上云迁移 数据传输服务 DTS 支持RDBMS、NoSQL、OLAP等数据源间的数据交互，集数据迁移/订阅/同步于一体，助您构建安全、可扩展、高可用的数据架构。通过数据库网关，可将本地或第三方云的数据库低成本地接入至阿里云。...
应用场景
本地IDC/跨云数据库上云迁移 数据传输服务 DTS 支持RDBMS、NoSQL、OLAP等数据源间的数据交互，集数据迁移/订阅/同步于一体，助您构建安全、可扩展、高可用的数据架构。通过数据库网关，可将本地或第三方云的数据库低成本地接入至阿里云。...
指定对象导出发布包
数据架构 数据架构 ① 筛选与搜索区 您可通过业务对象的名称关键字进行模糊搜索，也可根据数据板块、对象类型、变更时间、变更人、是否删除进行精确筛选。② 列表区 为您展示业务对象的名称、对象ID、对象类型、数据板块、变更时间、变更人...
指定对象导出发布包
数据架构 数据架构 ① 筛选与搜索区 您可通过业务对象的名称关键字进行模糊搜索，也可根据数据板块、对象类型、变更时间、变更人、是否删除进行精确筛选。② 列表区 为您展示业务对象的名称、对象ID、对象类型、数据板块、变更时间、变更人...
管理标签架构待发布对象
标签实体 待发布对象 标签实体待发布对象页面主要由搜索与筛选区、数据架构对象列表、批量操作组成。各区域及操作说明如下。区域 描述 ① 搜索与筛选区 搜索及筛选区支持根据发布对象变更类型、当前环境是否变更、发布状态或输入对象名称...
管理标签架构待发布对象
标签实体 待发布对象 标签实体待发布对象页面主要由搜索与筛选区、数据架构对象列表、批量操作组成。各区域及操作说明如下。区域 描述 ① 搜索与筛选区 搜索及筛选区支持根据发布对象变更类型、当前环境是否变更、发布状态或输入对象名称...
功能特性
云数据库MongoDB版（ApsaraDB for MongoDB）完全兼容MongoDB协议，基于飞天分布式系统和高可靠...通过数据传输可实现不停服数据迁移、数据异地灾备、跨境数据同步、缓存更新策略等多种业务应用场景，助您构建安全、可扩展、高可用的数据架构。
应用场景
实时数仓 该场景需要在一个平台上提供统一的在线查询和离线计算的能力，简化数据架构，降低开发和运维成本。通过弹性伸缩支持更合理的资源配比，减少非高峰期的保有资源，优化成本，提高性价比。该场景可实现：在离线一体化 支持数据实时增...
创建Kudu数据源
从早期的OLTP、OLAP拆分，到后来的Lambda架构，都存在数据复制和同步的复杂性，而Kudu的单一数据架构，规避了传统架构数据复制和同步的复杂性。更多详情请参见 Kudu官网。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、...
数据节点问题
常见数据节点问题列表：在数据访问代理中使用 RDS 或 OceanBase 的节点 ID 如何查找 RDS 或 OceanBase 的节点 ID 在数据访问代理中使用 RDS 或 OceanBase 的节点 ID 在添加物理数据节点时，需要通过数据节点 ID 来定位指定的数据节点，如下...
数据服务：低成本快速发布API
核心技术与架构 数据服务采用Serverless架构，您只需要关注API本身的查询逻辑，无需关心运行环境等基础设施，数据服务会为您准备好计算资源，并支持弹性扩展，零运维成本。计费 使用DataWorks的数据服务功能创建数据API后，API调用请求需...
应用场景
场景三：查询分载/读能力横向扩展 在有大量读请求的场景，大量读取流量可能会对主流程业务产生影响，这时可以通过构建只读库，主生产库与只读库之间通过数据同步服务实现数据的实时增量复制，将只读流量切换至只读实例，大大降低了主数据库...
应用场景
表格存储 有互联网应用架构（包括数据库分层架构和分布式结构化数据存储架构）、数据湖架构和物联网架构三种典型应用架构。本文结合 表格存储 的典型应用架构介绍了不同应用架构下的应用场景。互联网应用 目前互联网已在日常生活中广泛应用...
概述
动态配置（Distributed Resource Management，简称 DRM）是一个分布式环境下，实时动态的配置管理框架。可以在应用没有重启的情况下，完成配置的...一致性高 除变更推送能力外，客户端还定时检查数据版本，一旦有数据不一致就触发主动拉数据。
日志说明
客户端日志 数据访问代理连接器 dbp-connetor 是一个标准的 JDBC 实现，为用户提供了丰富的客户端扩展功能，例如 traceId 透传、SQL 链路追踪、数据库加密解密等功能。结合 dbp-connector，即可在 logs/dbp-connector-digest.log 日志中，...
基本概念
中文 英文 释义 实例 instance 实例是数据访问代理的集群，相当于一个逻辑的物理数据库实例。实例基于 MySQL 标准接口，作为统一的 SQL 请求入口，所有 SQL 都需要请求给实例进行处理，实例会负责将访问请求发到正确的物理数据库上。数据库...
基础术语
异常 核对任务运行中发现数据有差异，系统会创建异常事件（Issue）。说明 任务重跑时可能会重复产生差异。差异数据 也叫差异，指核对任务执行时（执行 SQL）发现的不匹配核对规则的数据。您可以在异常详情里查看在某个核对周期中发现的抽样...
注意事项
分库分表规则 数据访问代理可以根据任意字段、多个字段进行分库分表，且同一个分表可以配置多个规则。如果配置了分表规则后，所有 SQL 请求都需要带上分库分表字段。如果数据库分片集群是分库分表模式，则所有数据库分表都需要配置分库分表...
新增数据同步任务
本文以 RDS 数据源到分布式搜索服务（云搜 ZSearch）的实时同步为例，介绍如何新增数据...任务创建完成后，当 RDS 中有数据更新时，将会实时同步到目的端云搜 ZSearch 控制台。您可以到该任务的详情页查看任务的同步情况，详见 查看任务详情。
功能特性
数据访问代理兼容 MySQL 协议和语法，支持分库分表、平滑扩容、服务升降配、透明读写分离和分布式事务等特性，具备分布式数据库全生命周期的运维管控能力。分库分表 支持 RDS、OceanBase、MySQL 的分库分表。在创建分布式数据库后，只需...
概述
数据同步服务（Data Synchronization Service，简称 DSS）是蚂蚁金融科技提供的数据流传输与转换平台。它具备多种数据库的日志解析能力，包括 MySQL、RDS、Oracle、OceanBase、HBase 等。下游可通过数据订阅功能订阅到这些数据库的实时数据...
Tair Proxy特性说明
当标准架构无法支撑业务发展时，您无需修改代码即可将标准架构的数据迁移至带有Proxy的集群架构，大幅度降低业务改造成本。负载均衡和路由转发 Proxy与后端的数据分片建立长连接，负责请求负载均衡和路由转发操作，关于转发规则的介绍，请...
Redis Proxy特性说明
当标准架构无法支撑业务发展时，您无需修改代码即可将标准架构的数据迁移至带有Proxy的集群架构，大幅度降低业务改造成本。负载均衡和路由转发 Proxy与后端的数据分片建立长连接，负责请求负载均衡和路由转发操作，关于转发规则的介绍，请...
任务管理概述
数据访问代理会通过触发 DDL 任务来进行数据库与数据表的管理操作，比如创建、删除数据库，创建、删除数据表等。这些 DDL 任务既可以在创建物理分库前由数据访问代理自动触发，也可以由您在创建数据表时通过传入 SQL 文件或者直接输入 DDL ...
任务状态说明
同步任务是数据实时同步的基本单元。同步任务在创建及运行过程中，不同阶段会处于不同的状态，具体如下表所示。任务状态 状态说明 可进行的操作 创建中 同步任务正在进行同步初始化 查看同步配置 运行中 同步任务正常同步中 查看同步配置 ...
什么是云原生内存数据库Tair
实例规格 云原生内存数据库Tair 每种架构都有多种规格，详细信息请参见 规格查询导航。学习路径 您可以通过学习 云原生内存数据库Tair学习路径，由浅入深地学习 云原生内存数据库Tair 的产品知识。免费试用 阿里云免费试用面向符合条件的新...
技术面临的挑战与革新
在Proxy的协同下，甚至可以做到节点切换对应用无感知 传统分布式架构与存储计算分离架构对比 分布式数据库其实已经有了不短的历史，早期的分布式数据库，在整体架构上可以分为share nothing和share disk两大类。share disk通过扩展底层的...
集群架构
对Redis协议不敏感的应用 集群架构引入了多个组件，在对Redis协议的支持上相比标准架构有一定限制。详情请参见 集群架构与读写分离架构的命令限制。常用帮助 集群架构中分片内存占用异常的排查方法请参见 发现并处理大Key和热Key。需要掌握...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
产品系列概述
一主多从架构适用于有大量流量高峰读请求和数据智能分析需求的大中型企业的生产数据库场景，如互联网新零售行业、汽车制造行业、教育行业、企业大型ERP系统等。MySQL 8.0 MySQL 5.7 高可用版 一主一备的高可用架构和七个只读节点，购买时...
标准版-单副本
若您对数据有可靠性要求，推荐使用 高可用架构。使用场景 纯缓存类业务场景 单副本架构不能提供数据可靠性，如果发生节点故障，您需要重新对业务进行预热，因此，在对数据可靠性要求较高的敏感性业务中，建议选用双副本架构。对Redis协议...
- 产品推荐
- 这些文档可能帮助您