消除数据重分布

许多查询在执行中需要进行数据交换,比如redistribution和broadcast。数据交换所导致的费用在整个查询执行时间中所占比例比较可观,同时也消耗网络资源。所以应该尽量减少和避免数据交换。首先分析数据库系统的查询模式,确定系统中成本最高...

产品简介

首先,Data Exchange提供了一个集中的数据交换平台,使用户能够浏览和订阅各种数据产品。这些数据产品涵盖了多个行业及领域,包括智能汽车、金融等。用户可以根据自己的需求浏览各种数据集,并选择订阅感兴趣的数据产品。其次,Data ...

敏感数据保护

敏感数据的数据集成加解密 如果在数据上云、数据交换等场景,需要对传输中的数据进行加解密保护,则可以使用Dataphin的集成加解密能力,对集成的数据进行加解密保护。加密后的数据只有拥有密钥权限的用户才能够进行查看,从而更好地保护...

敏感数据保护

敏感数据的数据集成加解密 如果在数据上云、数据交换等场景,需要对传输中的数据进行加解密保护,则可以使用Dataphin的集成加解密能力,对集成的数据进行加解密保护。加密后的数据只有拥有密钥权限的用户才能够进行查看,从而更好地保护...

HTTP API 概览

默认数据交换是通过 JSON。所有返回的结果都使用标准的 HTTP 响应代码,并使用特定的格式返回错误。下表列出了 TSDB 提供的与数据读写和管理相关的所有 API。关于如何使用每个 API 的具体说明,请点击描述中提供的链接查看相应文档。API ...

LTS(原BDS)服务介绍

支持简单易用的数据交换、处理、订阅等能力,满足用户的数据迁移、实时订阅、数湖转存、数仓回流、单元化多活、备份恢复等需求,实现面向云HBase的一站式数据生态服务。核心能力 云原生分布式:LTS是一个基于ECS部署的分布式系统,具备良好...

什么是云原生多模数据库Lindorm

开放兼容 兼容SQL、HBase/Cassandra/S3、TSDB、HDFS、Solr、Kafka等 多种标准接口,支持与Hadoop、Spark、Flink、Kafka等系统无缝打通,并提供简单易用的数据交换、处理、订阅等能力。多模介绍 Lindorm支持宽表、时序、对象、文件、队列、...

LTS(原BDS)服务介绍

支持简单易用的数据交换、处理、订阅等能力,满足用户的数据迁移、实时订阅、数湖转存、数仓回流、单元化多活、备份恢复等需求,实现面向Lindorm的一站式数据生态服务。核心能力 云原生分布式:LTS是一个基于ECS部署的分布式系统,具备良好...

图扑案例

如图3所示,阿里 云原生多模数据库 Lindorm 在云端单实例融合了宽表、索引、时序等多种数据引擎能力,通过阿里云DTS/DMS或第三方开源数据交换/ETL软件(如Apache nifi、Sqoop等)打通多引擎数据交互通道,根据应用场景业务来适配数据。...

产品整体介绍

技术架构 以下为 AnalyticDB PostgreSQL版 的架构图,主要包含Master Node和Compute Node两大组件,中间通过Interconnect进行互联通信和数据交换传输。Master Node和Compute Node提供多副本保障服务高可用和数据高可靠,同时均支持通过...

内存型

为了提高线程的并行度,IO线程和Worker线程之间采用无锁队列和管道进行数据交换。说明 对于通用的类型,例如:String、List、Set、Hash、Zset、Hyperloglog、Geo以及扩展结构都有很好的加速效果。对于Pub、Sub、Blocking系列API,由于其...

数据传输预检查

启动数据迁移项目时,为确保项目的顺利运行,OceanBase 数据传输功能会自动启动预检查环节,针对源端和目标端的数据库连通性、相关配置的正确性、增量日志参数等问题或设置进行检查。本文为您介绍数据迁移项目预检查环节的常见报错和解决...

日志备份时报:The transaction log for database xx ...

如果 tempdb 数据库总空间大于等于5 GB,且可以重启数据库实例:重启数据库实例,具体操作请参见 重启实例。在目标实例控制台左侧导航栏中,单击 备份恢复。在 备份恢复 页单击 备份并收缩事务日志。在弹出的对话框中单击 确定。如果 ...

基本概念

支持简单易用的数据交换、处理、订阅等能力,满足用户的数据迁移、实时订阅、数湖转存、数仓回流、单元化多活、备份恢复等需求,实现面向Lindorm的一站式数据生态服务。更多信息,请参见 LTS(原BDS)服务介绍。M MaxCompute 大数据计算...

控制台发布记录

2024-3-7 开启冷数据归档 数据与缓存一站式 PolarDB MySQL版 支持数据与缓存一站式功能,在保证数据强一致性的同时,面向在线业务场景构建一套完整的数据库+缓存的解决方案。2024-3-12 灰度发布中 PolarDB MySQL推出数据与缓存一站式功能 ...

如何将冷存数据进行预热

本文介绍将冷存数据进行预热的最佳实践。场景描述 冷存中的数据首次查询时延迟会比较高,可以提前预热将其加载到持久化缓存...如果希望增加缓存比例,可通过控制台界面调大 polar_smgrcache_size 参数,调整完后立即生效,无需重启数据库。

如何将冷存数据进行预热

本文介绍将冷存数据进行预热的最佳实践。场景描述 冷存中的数据首次查询时延迟会比较高,可以提前预热将其加载到持久化缓存...如果希望增加缓存比例,可通过控制台界面调大 polar_smgrcache_size 参数,调整完后立即生效,无需重启数据库。

常见报错

systemctl restart mysqld 说明 修改配置文件后,需要重启数据库实例配置才可生效,请考虑在业务低峰期重启自建数据库实例。以上操作完成后,MySQL已重启。您可使用步骤1的命令查看binlog日志是否已开启成功,然后重新启动备份计划即可。...

版本管理

PolarDB 集群架构共三层:数据库代理Proxy、数据库内核引擎DB和数据库分布式存储Store。您可以根据实际情况单独升级Proxy或内核引擎,也可以绑定一起升级。注意事项 版本升级一般不超过30分钟,升级过程中会重启数据库代理Proxy或内核引擎...

版本管理

PolarDB 集群架构共三层:数据库代理Proxy、数据库内核引擎DB和数据库分布式存储Store。您可以根据实际情况单独升级Proxy或内核引擎,也可以绑定一起升级。注意事项 版本升级一般不超过30分钟,升级过程中会重启数据库代理Proxy或内核引擎...

小版本升级

PolarDB 集群架构共三层:数据库代理Proxy、数据库内核引擎DB和数据库分布式存储Store。您可以根据实际情况单独升级Proxy或内核引擎,也可以绑定一起升级。关于版本或者主动运维升级的相关问题,可加钉钉群咨询,群号:51685000218。注意...

启用Performance Schema

数据库自治服务DAS(Database Autonomy Service)性能洞察(新版)的数据基于MySQL的Performance Schema,启用该功能后才可以使用性能洞察(新版)。本文介绍如何启用Performance Schema。前提条件 数据库实例为:RDS MySQL 说明 不支持 ...

如何快速定位及解决数据库问题

本文介绍了数据库发生故障时的快速判断方法和解决办法。如何定位系统瓶颈是否在数据库上 通过Processlist来判断 执行以下语句,显示 PolarDB-X 上所有正在执行的SQL语句。...方法四:重启数据库 以上方法都无效的情况下,请重启数据库。

开启和使用冷数据分层存储

本文介绍如何开启冷数据分层存储功能,以及开启功能后的使用方式。使用限制 仅 PolarDB PostgreSQL版 14.9.13.0 及以上版本支持冷数据分层存储功能。开启冷数据分层存储功能后,无法关闭该功能,只能删除冷数据。如果没有存储数据,开启该...

开启和使用冷数据分层存储

本文介绍如何开启冷数据分层存储功能,以及开启功能后的使用方式。使用限制 仅 PolarDB PostgreSQL版(兼容Oracle)2.0.14.13.0 及以上版本支持冷数据分层存储功能。开启冷数据分层存储功能后,无法关闭该功能,只能删除冷数据。如果没有...

开启和使用冷数据分层存储

本文介绍如何开启冷数据分层存储功能,以及开启功能后的使用方式。使用限制 仅 PolarDB PostgreSQL版(兼容Oracle)2.0.14.13.0 及以上版本支持冷数据分层存储功能。开启冷数据分层存储功能后,无法关闭该功能,只能删除冷数据。如果没有...

迁移 OceanBase 数据库 Oracle 租户的增量数据至 ...

本文为您介绍如何使用数据传输迁移 OceanBase 数据库 Oracle 租户的增量数据至 MySQL 数据库。重要 如果数据迁移项目长期处于非活跃状态(项目状态为 失败、已暂停 或 已完成),受增量日志保留时长等影响,项目可能无法恢复。数据传输将...

RDS PostgreSQL同步至AnalyticDB for PostgreSQL

注意事项 一个数据同步作业只能同步一个数据库,如果有多个数据库需要同步,则需要为每个数据库创建数据同步作业。在数据同步的过程中,如果要将源库中创建的新表作为同步对象,您需要对该表执行如下操作以保障该表数据同步的一致性。ALTER...

从RDS PostgreSQL同步至云原生数据仓库AnalyticDB ...

数据传输服务DTS(Data Transmission Service)支持将RDS PostgreSQL同步至 云原生数据仓库AnalyticDB PostgreSQL。通过DTS提供的数据同步功能,可以轻松实现数据的流转,将企业数据集中分析。前提条件 RDS PostgreSQL中待同步的数据表必须...

从RDS PostgreSQL同步至云原生数据仓库AnalyticDB ...

数据传输服务DTS(Data Transmission Service)支持将RDS PostgreSQL同步至 云原生数据仓库AnalyticDB PostgreSQL。通过DTS提供的数据同步功能,可以轻松实现数据的流转,将企业数据集中分析。前提条件 RDS PostgreSQL中待同步的数据表必须...

配置迁移实例

问题修复后,您需要手动调用 StartMigrationJob 接口来重启数据迁移任务。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 ...

常见问题

版本升级一般不超过30分钟,升级过程中会重启数据库代理Proxy或内核引擎DB,可能会导致数据库连接闪断。请您尽量在业务低峰期执行升级操作,并且确保您的应用有自动重连机制。详情请参见 版本管理。Q:如何进行故障自动切换?A:PolarDB ...

同步 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...

如果您变更目标端的唯一索引,需要重启数据同步项目,否则可能存在数据不一致的问题。节点之间的时钟不同步,或者电脑终端和服务器之间的时钟不同步,均可能导致增量同步的延迟时间不准确。例如,如果时钟早于标准时间,可能导致延迟时间为...

迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL ...

本文为您介绍如何使用数据传输迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态(项目状态为 失败、已暂停 或 已完成),受增量日志保留时长等影响,项目可能无法恢复。数据传输将主动释放...

迁移 OceanBase 数据库 MySQL 租户的数据至 MySQL ...

本文为您介绍如何使用数据传输迁移 OceanBase 数据库 MySQL 租户的数据至 MySQL 数据库。重要 如果数据迁移项目长期处于非活跃状态(项目状态为 失败、已暂停 或 已完成),受增量日志保留时长等影响,项目可能无法恢复。数据传输将主动...

迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL ...

本文为您介绍如何使用数据传输迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态(项目状态为 失败、已暂停 或 已完成),受增量日志保留时长等影响,项目可能无法恢复。数据传输将主动...

OceanBase 数据库之间的数据迁移

背景信息 您可以在数据传输控制台创建从 OceanBase 数据库迁移数据至 OceanBase 数据库同类型租户的数据迁移项目,通过结构迁移、全量迁移和增量同步,无缝迁移源端数据库中的存量业务数据和增量数据至目标端数据库。前提条件 数据传输已...

迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle ...

背景信息 在数据传输控制台创建从 OceanBase 数据库 Oracle 租户迁移数据至 Oracle 数据库的数据迁移项目,您可以通过结构迁移、全量迁移和增量同步,无缝迁移源端数据库中的存量业务数据和增量数据至 Oracle 数据库。同时,数据传输支持将...

迁移 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...

本文为您介绍如何使用数据传输迁移 RDS PostgreSQL 实例 的数据至 OceanBase 数据库 Oracle 租户。重要 如果数据迁移项目长期处于非活跃状态(项目状态为 失败、已暂停 或 已完成),受增量日志保留时长等影响,项目可能无法恢复。数据传输...

MySQL实例间的双向同步

数据传输服务DTS(Data Transmission Service)支持MySQL实例间的双向同步。支持的源和目标数据库 MySQL间同步支持以下源或目标数据库。本文以 RDS MySQL 实例为源和目标数据库介绍配置流程,其他数据源配置流程与本案例类似。源数据库 ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据传输服务 云数据库 Redis 版 数据库备份 DBS 云数据库 RDS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用