迁移数据上云
bin/kafka-consumer-groups.sh-new-consumer-describe-bootstrap-server自建集群接入点-group test-consumer-group 往自建集群中发送消息，在 云消息队列 Kafka 版 控制台中查看Topic的分区状态，确认当前服务器上消息总量是否正确。...
使用mysqldump将自建MariaDB数据库迁移上云
mysql-h实例外网地址>-P实例外网端口>-u实例高权限账号>-p上数据库名>想要迁移的数据库名>.sql mysql-h实例外网地址>-P实例外网端口>-u实例高权限账号>-p上数据库名>想要迁移的数据库名>trigger.sql 示例 mysql-h rm-bpxxxxx.mariadb.rds....
DTS 是否支持 VPC 内的 ECS 上的自建数据库迁移到 RDS...
支持，对于源 ECS 实例和目标 RDS 实例在相同 Region 的情况，DTS 可以直接访问 VPC 内 ECS 实例上的自建数据库；对于源 ECS 实例和目标 RDS 实例在不同 Region 的情况，ECS 实例需要挂载弹性公网 IP，配置迁移任务时，源实例选择 ECS 实例...
企业上云数据库迁移场景
场景描述 企业上云最大的难点在于业务数据库迁移，很多企业在上云前，数据库域名或IP往往是已被写入应用客户端代码中，当从本地构建的数据库迁移到RDS时，需要用户修改客户端代码进行应用改造，此过程复杂，且风险高。解决方案 通过pvtz...
企业上云数据库迁移场景
场景描述 企业上云最大的难点在于业务数据库迁移，很多企业在上云前，数据库域名或IP往往是已被写入应用客户端代码中，当从本地构建的数据库迁移到RDS时，需要用户修改客户端代码进行应用改造，此过程复杂，且风险高。解决方案 通过内网DNS...
使用DTS迁移副本集架构的自建MongoDB数据库上云
增量数据迁移：在全量迁移的基础上，将源MongoDB数据库的增量更新数据同步到目标MongoDB数据库中。说明 支持database、collection、index的新建和删除操作的同步。支持document的新增、删除和更新操作的同步。数据库账号的权限要求 迁移...
使用DTS迁移副本集架构的自建MongoDB数据库上云
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
使用DTS迁移单节点架构的自建MongoDB数据库上云
增量数据迁移：在全量迁移的基础上，将源MongoDB数据库的增量更新数据同步到目标MongoDB数据库中。说明 支持database、collection、index的新建和删除操作的同步。支持document的新增、删除和更新操作的同步。数据库账号的权限要求 迁移...
使用DTS迁移单节点架构的自建MongoDB数据库上云
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
移动数据分析提供用户访问上报原始数据的接口吗？
提供，在 移动数据分析申请开通“云隧道”功能，就可以在ODPS查询采集到的数据，一方面可以做BI分析，另一方面可以ETL数据加工，另外，用户可以通过ODPS访问到自己上传的原始日志是 移动数据分析帮助用户实现日志自主分析闭环的关键。
使用DTS迁移分片集群架构的自建MongoDB数据库上云
增量数据迁移：在全量迁移的基础上，将源MongoDB数据库的增量更新数据同步到目标MongoDB数据库中。说明 支持database、collection、index的新建和删除操作的同步。支持document的新增、删除和更新操作的同步。数据库账号的权限要求 数据库 ...
使用DTS迁移分片集群架构的自建MongoDB数据库上云
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
图层位置移动
单击选中最外层容器后，选择单击图层栏顶部的 置顶、置底、上移一层、下移一层 功能按键，可调整最外层容器的位置。单击选中图层栏或流式布局画布内的最外层容器后，通过流式布局画布中的上下移按钮可调整最外层容器的位置，详情请参见 ...
创建三维城市
在 选择创建方式 弹窗，鼠标移动到 官方基底数据 上，单击 创建。在 选择城市基底 弹窗中，选择一个或多个城市基底子组件，也可以选中弹窗右上角的 全选，选中所有的城市基底子组件。说明 您可以在提供数据精度的子组件右下角，查看组件...
柱状图层
数据 上图中的示例JSON代码如下。[{"lat":31.8998,"lng":102.2212,"value":7 },{"lat":28.6542,"lng":120.079,"value":3 },{"lat":24.0554,"lng":114.207,"value":4 },{"lat":33.5807,"lng":119.0305,"value":5 },{"lat":39.563,"lng":118....
散点层
数据 上图中的示例JSON代码如下。[{"lat":62.103883,"lng":106.523438,"value":51 },{"lat":50.064192,"lng":74.179688,"value":94 },{"lat":43.068888,"lng":104.765625,"value":90 },{"lat":16.299051,"lng":58.007812,"value":36 },{...
飞线层
数据 上图中的示例JSON代码如下。[{"from":"116.85059,31.69078","to":"118.69629,36.20882"},{"from":"120.89355,37.09024","to":"116.93848,31.61597"},{"from":"121.28906,29.34388","to":"117.20215,31.12820"},{"from":"118.16895,31....
如何选择备份方式
数据库文件级备份，备份内容是操作系统上数据库文件，常见工具为MySQL XtraBackup、Oracle RMAN等。全量备份原理 对每张表数据进行切分，然后在数据库上运行SQL语句，多线程并行读取数据。在数据库所在服务器上安装DBS备份网关，然后通过...
逻辑备份、物理备份与快照
物理备份：数据库文件级备份，备份内容是操作系统上数据库文件，常见工具为MySQL XtraBackup、Oracle RMAN等。快照：基于快照技术获取指定数据集合的一个完全可用拷贝，随后可以选择仅在本机上维护快照，或者对快照进行数据跨机备份，常见...
数据集成支持的数据源
不同集成类型适用场景 集成类型 适用场景 离线集成 适用于数据上云、云上数据迁移到本地业务系统等场景。例如，将本地数据库MySQL的数据迁移至阿里云数据库RDS中。整库迁移 适用于将本地数据中心或在ECS上自建的数据库，同步数据至离线数仓...
数据集成支持的数据源
不同集成类型适用场景 集成类型 适用场景 离线集成 适用于数据上云、云上数据迁移到本地业务系统等场景。例如，将本地数据库MySQL的数据迁移至阿里云数据库RDS中。整库迁移 适用于将本地数据中心或在ECS上自建的数据库，同步数据至离线数仓...
产品简介
阿里云数据湖构建（Data Lake Formation，简称 DLF）是一款全托管的快速帮助用户构建云上数据湖及Lakehouse的服务，为客户提供了统一的元数据管理、统一的权限与安全管理、便捷的数据入湖能力以及一键式数据探索能力。DLF可以帮助用户快速...
数据分析整体趋势
据Gartner统计，到2025年实时数据占比达30%，其中非结构数据占比达80%，同时数据存储云上规模达45%，而云上数据库规模可达75%。从数仓分析市场增长来看，据Global Market Insights分析，2019-2025全球年复合增长超过12%，中国则大于15%，...
应用场景
此外，您还可以选择数据湖构建DLF作为数据目录服务，DLF可以提供统一的元数据服务，并支持湖上数据的管理，通过DLF可以简化和加速湖上数据的治理过程。在数据湖场景下，通过采集程序，将用户的埋点日志近实时写入到OSS-HDFS，并使用Sqoop...
数据归档概述
当线上数据库中的历史数据（访问率很低的数据）越来越多，占用的存储越来越大，以至于会影响数据库的查询性能与业务运转，此时您可以使用 数据管理DMS 的数据归档功能，周期性地将指定表的数据归档至其他数据库或存储服务中。同时，该功能...
Delta Lake概述
很高 低 较高 事务性 支持 不支持 支持 性能 高 低 较高 扩展性 依赖于具体实现 高 高 面向人员 管理人员 管理人员、数据科学家 管理人员、数据科学家 成本 高 低 低 适用场景 Delta适用于云上数据湖数据管理解决方案。如果您存在以下场景...
功能概述
结合阿里云强大的安全防护体系，全密态数据库能够有效防御来自云平台外部和内部的安全威胁，时刻保护用户数据，让云上数据成为用户的私有资产。全密态数据库如何保证数据不在云端泄露？全密态数据库在对返回查询结果中包含的被保护数据始终...
产品概述
结合阿里云强大的安全防护体系，全密态数据库能够有效防御来自云平台外部和内部的安全威胁，时刻保护用户数据，让云上数据成为用户的私有资产。全密态数据库如何保证数据不在云端泄漏？数据是在客户端时，用户用自己的密钥加密后发送给云...
产品优势
云原生 依托云原生优势，为云上数据源提供一体化数据保护和防御机制。支持防护常见的结构化数据、非结构化数据和大数据产品，例如对象存储OSS、云数据库RDS、MaxCompute等。智能化 运用大数据和机器学习能力，通过智能化的算法，对敏感数据...
产品概述
结合阿里云强大的安全防护体系，全密态数据库能够有效防御来自云平台外部和内部的安全威胁，时刻保护用户数据，让云上数据成为用户的私有资产。全密态数据库如何保证数据不在云端泄漏？数据是在客户端时，用户用自己的密钥加密后发送给云...
DBS沙箱功能概览
典型应用场景 基于线上数据的开发测试（Dev或Ops）：测试和预发布需要基于线上存量数据验证，但又必须保护线上数据不被污染。DBS沙箱功能可以快速提供历史全量数据副本，同时满足快速测试迭代和数据可靠性保障需求。在线应急容灾：基于DBS...
调试实时任务
手动上传数据（本地调试方式）采集线上数据（Session集群调试方式）离线模式调试 在 调试配置 对话框的 选择采样模式 页签中，选择 离线模式-FLINK Batch任务。单击 下一步。在调试配置对话框中，选择 调试数据来源。手动上传数据（本地...
概述
数据湖构建可以帮助用户快速构建云上数据湖，采用统一的管理视角治理数据湖。本产品目前处于公测阶段，您可以随时开通使用，目前数据湖构建所有功能均为免费使用阶段。用户使用流程 数据湖构建将帮助您快速简洁抽取源数据到统一数据湖的...
快速实现数据分类分级
数据安全中心DSC（Data Security Center）是一款数据安全中心产品，可以通过收集和分析数据库的信息，提供云上数据的分类分级（包括敏感数据识别）能力。本文介绍如何快速在DSC控制台实现数据分类分级。前提条件 已规划好要接入数据安全...
数据加工过程卡点校验
为保障线上数据的准确性，每次变更都需要经过测试再发布到线上生产环境，且生产环境测试通过后才算发布成功。任务变更或数据重跑。在进行更新操作前，需要通知下游变更原因、变更逻辑、变更时间等信息。下游对此次变更没有异议后，再按照...
什么是数据库备份DBS
物理备份：数据库文件级备份，备份内容是操作系统上数据库文件，常见工具为MySQL XtraBackup、Oracle RMAN等。快照：基于快照技术获取指定数据集合的一个完全可用拷贝，随后可以选择仅在本机上维护快照，或者对快照进行数据跨机备份，常见...
应用场景
阿里云数据库备份DBS支持将其他云上数据库备份到阿里云OSS上，通过相应的配置可以将跨云备份运行起来，成本可控，稳定性也有保障。优势：安全可靠：数据加密传输，避免数据库的服务端口显示至公网中，安全可靠。简单易用：现代化备份平台，...
客户案例
新零售行业：大润发云上数据中台建设 客户架构如下。客户简介 为了快速数字化转型，拥抱新零售，大润发计划两年内将IT系统全面迁移到阿里云上，不再自建IDC。同时与阿里云合作启动数据中台项目，可以帮助大润发降低TCO的同时，更好的依托云...
数据迁移和同步方案概览
云数据库MongoDB支持通过物理备份文件和逻辑备份文件两种途径，将云上数据迁移至本地数据库。不同迁移场景下数据迁移的方法如下。迁移场景 源库架构 文档链接 自建数据库迁移至云数据库MongoDB 单节点或副本集 将ECS上单节点或副本集架构的...
- 产品推荐
- 这些文档可能帮助您