访问实例
Lindorm通过访问实例满足大量数据库读取需求，本文介绍如何从Lindorm控制台获取Lindorm消息引擎Kafka访问地址。获取连接地址 登录 Lindorm管理控制台。在页面左上角，选择实例所属的地域。在 实例列表 页，单击目标实例ID或者目标实例所在...
简介
只读实例可以满足大量的数据库读取需求，增加应用的吞吐量，实现读取能力的弹性扩展，分担数据库压力。使用场景 数据库有少量写请求，但有大量读请求。总览 GDB创建只读实例时会利用云盘快照功能，发起最新的数据快照，数据与主实例一致，...
使用ClickHouse-Local迁移上云
当您需要优化数据管理、提高数据访问性能和降低数据库维护成本时，您可以将自建数据库迁移至云数据库ClickHouse企业版。云数据库ClickHouse企业版通过ClickHouse-Local工具为您的迁移任务提供了简便且可靠的解决方案。什么是ClickHouse-...
什么是RDS MySQL
RDS MySQL 阿里云关系型数据库服务RDS（Relational Database Service）支持MySQL引擎，RDS MySQL是基于阿里巴巴MySQL源码分支的在线数据库服务，经过双十一高并发、大数据量的考验，拥有优良的性能。RDS MySQL支持实例管理、账号管理、数据...
概述
为了实现读取能力的弹性扩展，分担数据库压力，您可以创建一个或多个只读实例，利用只读实例满足大量的数据库读取需求，增加应用的吞吐量。读写分离：读写分离功能是在只读实例的基础上，额外提供了一个读写分离地址，联动主实例及其所有...
什么是RDS SQL Server
RDS SQL Server 阿里云关系型数据库RDS（Relational Database Service）支持SQL Server引擎，RDS SQL Server拥有 微软正版的License授权，同时还拥有高可用架构和任意时间点的数据恢复功能，强力支撑各种企业应用。说明 RDS SQL Server的...
什么是RDS PostgreSQL
RDS PostgreSQL 阿里云关系型数据库RDS（Relational Database Service）支持PostgreSQL引擎，RDS PostgreSQL的优点主要集中在对SQL规范的完整实现以及丰富多样的数据类型支持，包括JSON数据、IP数据和几何数据等。除了完美支持事务、子查询...
创建只读实例（MySQL）
为了实现读取能力的弹性扩展，分担数据库压力，您可以创建一个或多个只读实例，利用只读实例满足大量的数据库读取需求，增加应用的吞吐量。前提条件 已创建MySQL实例，详情请参见 创建MyBase MySQL实例。背景信息 关于云数据库专属集群...
PostgreSQL只读实例简介
在对数据库有少量写请求，但有大量读请求的应用场景下，单个实例可能无法承受读取压力，甚至对业务产生影响。为了实现读取能力的弹性扩展，分担数据库压力，您可以创建一个或多个只读实例，利用只读实例满足大量的数据库读取需求，增加应用...
RDS术语
Z 只读实例 只读实例满足大量的数据库读取需求，读取能力弹性扩展，分担数据库压力，增加应用的吞吐量。更多信息，请参见 只读实例简介。只读QPS 数据库只读时每秒执行的SQL数（仅包含SELECT）。增量数据迁移 DTS在全量迁移的基础上，将源...
部署与测试
应该是/api/db_get 对数据库的配置有问题导致的，我们打开/api/db_get.js 看看 该文件引入了 db_config 文件，这个文件里是数据库连接的配置信息，我们继续打开该文件 在 db_config 文件中我们看到了数据库连接信息是从环境变量中读取的，...
RDS术语
Z 只读实例 只读实例满足大量的数据库读取需求，读取能力弹性扩展，分担数据库压力，增加应用的吞吐量。更多信息，请参见 只读实例简介。只读QPS 数据库只读时每秒执行的SQL数（仅包含SELECT）。增量数据迁移 DTS在全量迁移的基础上，将源...
RDS术语
Z 只读实例 只读实例满足大量的数据库读取需求，读取能力弹性扩展，分担数据库压力，增加应用的吞吐量。更多信息，请参见 只读实例简介。只读QPS 数据库只读时每秒执行的SQL数（仅包含SELECT）。增量数据迁移 DTS在全量迁移的基础上，将源...
RDS术语
Z 只读实例 只读实例满足大量的数据库读取需求，读取能力弹性扩展，分担数据库压力，增加应用的吞吐量。更多信息，请参见 只读实例简介。只读QPS 数据库只读时每秒执行的SQL数（仅包含SELECT）。增量数据迁移 DTS在全量迁移的基础上，将源...
RDS术语
Z 只读实例 只读实例满足大量的数据库读取需求，读取能力弹性扩展，分担数据库压力，增加应用的吞吐量。更多信息，请参见 只读实例简介。只读QPS 数据库只读时每秒执行的SQL数（仅包含SELECT）。增量数据迁移 DTS在全量迁移的基础上，将源...
MySQL只读实例简介
在对数据库有少量写请求，但有大量读请求的应用场景下，单个实例可能无法承受读取压力，甚至对业务产生影响。为了实现读取能力的弹性扩展，分担数据库压力，您可以创建一个或多个只读实例，利用只读实例满足大量的数据库读取需求，增加应用...
MongoDB（公测中）
API 种类 DataStream和SQL 是否支持更新或删除结果表数据 是 特色功能 MongoDB的CDC源表，即MongoDB的流式源表，会先读取数据库的历史全量数据，并平滑切换到oplog读取上，保证不多读一条也不少读一条。即使发生故障，也能保证通过Exactly ...
收缩膨胀表和索引（pg_squeeze）
例如，以rds_superuser的身份（必须是高权限用户）清理数据库 database1 和 database2：说明 清理前，已分别在数据库 database1 和 database2 中创建了pg_squeeze插件，详情请参见 创建和删除插件。squeeze.worker_autostart='database1 ...
RDS(MySQL)
登录到RDS数据库并执行创表语句 建表语句：CREATE DATABASE case_demos;USE case_demos;CREATE TABLE `word_count_demo`(`word` text,`count` int(11)DEFAULT NULL)ENGINE=InnoDB DEFAULT CHARSET=utf8;4.登录Databricks数据洞察集群进入...
如何选择备份方式
日志读取速度也会随着数据库日志产生速度而调整。特性 支持进行更精细的库、表级别备份。不会对数据库加锁，对数据库性能影响较小。仅支持备份整个数据库实例。从数据库磁盘中读取数据，对数据库IO性能有一定影响。通常情况下，物理备份与...
异构数据源访问
若您需要通过 AnalyticDB PostgreSQL版 访问外部异构数据源（HDFS、Hive和JDBC）时，可以使用异构数据源访问功能将外部数据转换为 AnalyticDB PostgreSQL版 数据库优化后的格式进行查询和分析。功能说明 外部数据源管理提供高性能的结构化...
逻辑备份、物理备份与快照
日志读取速度也会随着数据库日志产生速度而调整。特性 支持进行更精细的库、表级别备份。不会对数据库加锁，对数据库性能影响较小。仅支持备份整个数据库实例。从数据库磁盘中读取数据，对数据库IO性能有一定影响。通常情况下，物理备份与...
Amazon S3数据源
Simple Storage Service（简称S3）是一种专为从任意位置存储和检索任意数量的数据而构建的对象存储，DataWorks数据集成支持使用Amazon S3 Reader插件从S3数据库读取数据，本文为您介绍DataWorks的Amazon S3数据读取能力。支持的Amazon S3...
配置并管理实时同步任务
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。实时同步支持的数据源及其配置详情请参见 实时同步支持的数据源。说明 数据源...
导入Elasticsearch数据
查询的复杂度 如果导入任务中存在复杂的Elasticsearch查询，则Elasticsearch服务端执行请求消耗的时间可能会比较长，从而影响整体的数据读取速度。Logstore Shard数量 日志服务的写性能取决于目标Logstore的Shard数量（单个Shard支持5 MB/s...
PolarDB-X 2.0数据源
mbps":"12"/限流，控制同步的最高速率，防止对上游/下游数据库读取/写入压力过大。} },"order":{"hops":[{"from":"Reader","to":"Writer"}]} } PolarDB-X 2.0 Writer脚本参数 脚本参数名 描述 是否必选 默认值 datasource 数据源名称。该...
插件配置概述
Imap input plugin logstash-input-jdbc 通过JDBC界面，将任一数据库数据读取到Logstash中。Jdbc input plugin logstash-input-kafka 从Kafka主题读取事件。Kafka input plugin logstash-input-pipe 从长时间运行的管道命令中流式读取事件...
功能概述
数据库自治服务DAS（Database Autonomy Service）提供智能压测功能，帮助您验证您的实例规格是否需要扩容，以便有效地应对业务流量高峰。适用场景 为应对即将到来的短期业务高峰，验证当前数据库实例规格是否需要扩容。数据库结构变更后...
Kafka数据源
实时同步写入数据到Kafka时，写入的格式为内置的JSON格式，写入数据为包含数据库变更消息的数据、业务时间和DDL信息的所有数据，数据格式详情请参见 附录：消息格式。同步任务类型 写入Kafka value 的格式 源端字段类型 写入时的处理方式 ...
Postgres CDC（公测中）
Postgres CDC可用于依次读取PostgreSQL数据库全量快照数据和变更数据，保证不多读一条也不少读一条数据。即使发生故障，也能采用Exactly Once方式处理。本文为您介绍如何使用Postgres CDC连接器。背景信息 Postgres CDC连接器支持的信息...
实时同步任务延迟解决方案
说明 如果有多个实时同步任务消费同一个Kafka Topic、DataHub Topic或者Loghub logstore的情况，您需要注意所有实时同步任务的读取速度之和是否超过限制。确认MySQL源端是否有提交大事务或者变更过于频繁（如大量的DML和DDL的操作）对于源...
通过缓存优化性能
然后在本地的连续读取上述数据，从而显著提高读取速度。说明 详细内容可参考Databricks官网文章：通过缓存优化性能 Delta缓存支持读取DBFS、HDFS、azureblob存储、azuredatalake存储Gen1和azuredatalake存储Gen2中的Parquet文件。它不支持...
CDC问题
MySQL CDC源表需要连接数据库读取Binlog，当源表数量逐渐增加，数据库压力也会逐渐增加。为了解决数据库压力过大的问题，可以考虑通过将表同步到Kafka消息队列中，再通过消费Kafka中数据进行解耦。详情请参见 MySQL整库同步Kafka。如果是...
如何使用Prometheus监控Cassandra
关键性能指标 指标名称 重要级别 指标描述 指标说明 mcac_table_read_latency Critical 客户端读取数据的延迟 该指标过高会导致应用程序的读取速度变慢，影响用户体验。mcac_table_write_latency Critical 客户端写数据的延迟 该指标过高会...
如何使用Prometheus监控Cassandra
关键性能指标 指标名称 重要级别 指标描述 指标说明 mcac_table_read_latency Critical 客户端读取数据的延迟 该指标过高会导致应用程序的读取速度变慢，影响用户体验。mcac_table_write_latency Critical 客户端写数据的延迟 该指标过高会...
外部表常见问题
建议您在OSS对应的外部表路径下，将OSS大文件拆分为小文件，从而增加读取外部表生成的Mapper数量，提升读取速度。使用SDK搜索MaxCompute外部表数据速度慢 问题现象 使用SDK搜索MaxCompute外部表数据速度慢。解决措施 外部表仅支持全量搜索...
概述
使用说明 归档冷数据 您需要先登录 PolarDB控制台 并 开启冷数据归档 功能，然后 连接数据库集群，再执行冷数据归档操作：普通表：您可以手动将冷数据 归档为CSV或ORC格式 并存储在OSS上。分区表：您可以手动将冷数据 归档为CSV或ORC格式 ...
Python SDK示例：SQL
设置读取结果为pandas DataFrame#直接使用 reader 的 to_pandas 方法 with o.execute_sql('select*from dual').open_reader(tunnel=True)as reader:#pd_df 类型为 pandas DataFrame pd_df=reader.to_pandas()设置读取速度（进程数）说明 多...
上下游存储
Flink和Kafka之间的网络连通并不意味着能读取数据，只有Kafka Broker在bootstrap过程中返回的集群metadata中描述的Endpoint，才可以连通Flink和Kafka，并读取到Kafka的数据，详情请参见 Flink-cannot-connect-to-Kafka。检查办法为：使用...
- 产品推荐
- 这些文档可能帮助您