如何提升写入效率

本文介绍如何通过优化写入的策略提升TSDB 写入效率:请使用“并发+批量”的方式写入数据。推荐并发大于 256,推荐批量数大于 400。如果通过SDK提交可以遵循一下写入优化的方面和原则:SDK实例创建和销毁:TSDB SDK在一个进程中只需要创建...

性能测试

以时空轨迹数据为7.6 GB为例,写入耗时的测试结果如下:数据库 写入耗时 云原生多模数据库 Lindorm Ganos引擎 7分钟 开源GeoMesa(HBase)13分钟 云数据库MongoDB分片集群 34分钟 创建时空索引后的时空数据存储空间占用情况 创建时空主键...

业务切换流程

注意事项 由于执行业务切换操作需要停止数据库写入并暂停业务,请选择业务低峰期操作以降低影响。为便于区分会话信息以及提升数据安全性,建议单独创建并授权一个数据库账号以供数据迁移使用。操作步骤 等待数据迁移任务的进度变更为 增量...

业务切换流程

注意事项 由于执行业务切换操作需要停止数据库写入并暂停业务,请选择业务低峰期操作以降低影响。为便于区分会话信息以及提升数据安全性,建议单独创建并授权一个数据库账号以供数据迁移使用。操作步骤 等待数据迁移任务的进度变更为 增量...

通过DTS实现数据库的垂直拆分

当RDS实例负载过大时,可以将该实例的一个数据库或表垂直拆分至另外一个单独的实例中。本文介绍如何通过双写方案和简易拆分方案实现垂直拆分。背景信息 假设一个RDS实例上有数据库A和B,随着业务增长实例瓶颈也日趋可见,如想要减轻该实例...

Azure Cosmos DB API for MongoDB迁移至阿里云

使用MongoDB数据库自带的备份还原工具,您可以将Azure Cosmos DB API for MongoDB迁移至阿里云。注意事项 该操作为全量迁移,为避免迁移前后数据不一致,迁移开始前请停止数据库写入。如果您之前使用 mongodump 命令对数据库进行过备份操作...

创建账号和数据库

参数 说明 限制并发量 指对应数据库并发请求执行的上限量,默认不限制,您也可以使用高权限账号登录数据库后,使用 ALTER DATABASE<数据库名>CONNECTION LIMIT<并发量>;命令修改。表空间 指数据库所属的表空间,默认为 pg_default,表空间...

创建账号

CREATE DATABASE 命令默认通过复制template1来创建数据库。通过该方式创建的数据库,Public Schema的Owner均为第一个高权限账号。第一个高权限账号的Comment开头会包含说明:template1 public schema owner。普通账号 可以通过控制台、API...

JDBC数据

事务隔离级别 脏读 不可重复读 幻读 READ_UNCOMMITTED 是 是 是 READ_COMMITTED 否 是 是 REPEATABLE_READ 否 否 是 SERIALIZABLE 否 否 否 NONE 无 无 无 写入数据 当您需要向数据库写入数据时,可以通过以下命令设置一个关联的SQL ...

限制说明

事务支持 云数据库 Memcache 版不支持事务,有事务性要求的数据不适合写入,而应该直接写入数据库。使用场景 当数据访问分布比较均匀,数据没有明显的冷热分别时,大量的访问请求在云数据库 Memcache 版无法命中,使用云数据库 Memcache 版...

SpringBatch 连接 OceanBase 数据库

本文介绍 SpringBatch 连接示例。环境配置 JDK 1.8。OceanBase 3.x(Oracle 模式)。基于 spring-boot 集成 spring-...}/调用数据库写入类方法写入数据 addDescPeopleWriter.setDataSource(dataSource);addDescPeopleWriter.write(list);}

SpringBatch 连接 OceanBase 数据库

本文介绍 SpringBatch 连接示例。环境配置 JDK 1.8。OceanBase 3.x(MySQL 模式)。基于 spring-boot 集成 spring-batch...}/调用数据库写入类方法写入数据 addDescPeopleWriter.setDataSource(dataSource);addDescPeopleWriter.write(list);}

全球多活使用限制

写入条件不满足 子实例A在1.1时刻收到命令(setnx key->value_A),并于1.2时刻将数据写入数据库。子实例B在2.1时刻收到命令(setnx key->value_B),并于2.2时刻将数据写入数据库。在3时刻子实例间执行数据同步将形成冲突。说明 可能...

全球多活使用限制

写入条件不满足 子实例A在1.1时刻收到命令(setnx key->value_A),并于1.2时刻将数据写入数据库。子实例B在2.1时刻收到命令(setnx key->value_B),并于2.2时刻将数据写入数据库。在3时刻子实例间执行数据同步将形成冲突。说明 可能...

Grafana接入阿里云时序数据库TSDB For InfluxDB®️...

前置条件 在接入Grafana之前,若您已经购买阿里云时序数据库TSDB For InfluxDB®并配置好用户账号与数据库信息,同时写入了一定量的数据。如果您还没有购买,可以参考 购买流程。购买完成后,您还需要创建用户账号、数据库和存储策略,并...

迁移 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...

本文为您介绍如何使用数据传输迁移 RDS PostgreSQL 实例 的数据至 OceanBase 数据库 Oracle 租户。重要 如果数据迁移项目长期处于非活跃状态(项目状态为 失败、已暂停 或 已完成),受增量日志保留时长等影响,项目可能无法恢复。数据传输...

UPSERT

与关系型数据库写入的区别 Lindorm的UPSERT语句写入数据的效果与传统关系型数据库写入效果存在以下不同:传统关系型数据库 如果表定义了PRIMARY KEY,那么当连续两次写入相同PRIMARY KEY的数据时(使用INSERT语句且不带ON DUPLICATE KEY...

命令行界面

clear[database|db|retention policy|rp]清除当前数据库或保留策略的上下文。connect在不退出Shell的情况下,连接到其它服务器。默认情况下,influx 连接到 localhost:8086。如果您没有指定host或者port,influx 假设未指定的参数使用默认...

查询结果不符合预期的常见原因

在执行写入操作时,数据会被先写入预写日志(Write-Ahead-Log,WAL)中,再写入数据库。只要写入过程中没有出现报错,相应的数据一定会写入成功,即使遇到机器宕机等情况,都可以通过恢复WAL的方式恢复数据,保障数据的持久性,不会出现...

创建反向实例

背景信息 DTS支持为正常运行的同步实例一键创建反向增量同步实例,在业务写入数据库由原同步实例的源库切换为目标库时,帮助您将数据库切换后的增量业务数据同步至原业务写入数据库,常应用于数据库容灾场景下的数据回传。前提条件 原实例...

命令行界面介绍

Influx的命令行界面(CLI),它是一个用来跟数据库进行交互的轻量级工具。有关如何下载使用CLI,可参考文档命令行界面。CLI默认通过端口3242向TSDB For InfluxDB® HTTP API发送请求,直接与TSDB For InfluxDB®通信。说明 也可以向数据库...

配置并管理实时同步任务

数据集成附加字段支持的变量字段如下:EXECUTE_TIME:执行时间 UPDATE_TIME:更新时间 DB_NAME_SRC:原始数据库名称 DB_NAME_SRC_TRANSED:转换后数据库名称 DATASOURCE_NAME_SRC:源端数据源名称 DATASOURCE_NAME_DEST:目的端数据源名称 ...

HTTP API

db=database_name 对依赖数据库的查询是必需的(大多数 SELECT 查询和 SHOW 查询需要此参数)。设置查询的目标数据库 epoch=[ns,u,µ,ms,s,m,h]可选。返回具有特定精度的epoch时间戳。TSDB For InfluxDB®默认返回RFC3339格式的时间戳,...

一键实时同步至MaxCompute

数据集成附加字段支持的变量字段如下:EXECUTE_TIME:执行时间 UPDATE_TIME:更新时间 DB_NAME_SRC:原始数据库名称 DB_NAME_SRC_TRANSED:转换后数据库名称 DATASOURCE_NAME_SRC:源端数据源名称 DATASOURCE_NAME_DEST:目的端数据源名称 ...

一键实时同步至MaxCompute

数据集成附加字段支持的变量字段如下:EXECUTE_TIME:执行时间 UPDATE_TIME:更新时间 DB_NAME_SRC:原始数据库名称 DB_NAME_SRC_TRANSED:转换后数据库名称 DATASOURCE_NAME_SRC:源端数据源名称 DATASOURCE_NAME_DEST:目的端数据源名称 ...

CREATE CONTINUOUS QUERY

attr_identifier '=' attr_val 使用说明 数据库名(database_identifier)持续查询对象所属数据库的名称,不指定时默认是当前数据库。使用时必须在数据库名前后添加反引号(`),例如 `db_sensor`。持续查询名称(cq_identifier)使用时...

数据集成侧同步任务配置

您需要在数据集成同步任务配置前,配置好您需要同步的源端和目标端数据库,以便在同步任务配置过程中,可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源与读写能力。说明 数据...

离线同步至OSS

您需要在数据集成同步任务配置前,配置好您需要同步的源端和目标端数据库,以便在同步任务配置过程中,可通过选择数据源名称来控制同步任务的读取和写入数据库。同步解决方案支持的数据源及其配置详情请参见 支持的数据源与读写能力。说明 ...

一键实时同步至Kafka

您需要在数据集成同步任务配置前,配置好您需要同步的源端和目标端数据库,以便在同步任务配置过程中,可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...

一键实时同步至DataHub

您需要在数据集成同步任务配置前,配置好您需要同步的源端和目标端数据库,以便在同步任务配置过程中,可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...

配置并管理实时同步任务

数据集成附加字段支持的变量字段如下:EXECUTE_TIME:执行时间 UPDATE_TIME:更新时间 DB_NAME_SRC:原始数据库名称 DB_NAME_SRC_TRANSED:转换后数据库名称 DATASOURCE_NAME_SRC:源端数据源名称 DATASOURCE_NAME_DEST:目的端数据源名称 ...

全增量实时同步至Hologres

如上图所示,使用 源端数据库名 将源端数据库名作为目标schema名称,并且将所有满足 order_db.*正则表达式的源库写入目标Hologres名为 order_db 的schema中。自定义目标表名映射规则 在 目标表名映射自定义 列,单击 编辑 按钮。可以使用...

一键实时同步至AnalyticDB for MySQL 3.0

数据集成附加字段支持的变量字段如下:EXECUTE_TIME:执行时间 UPDATE_TIME:更新时间 DB_NAME_SRC:原始数据库名称 DB_NAME_SRC_TRANSED:转换后数据库名称 DATASOURCE_NAME_SRC:源端数据源名称 DATASOURCE_NAME_DEST:目的端数据源名称 ...

Oracle数据

说明 数据库容器CDB(Container Database)是Oracle 12c及之后版本的数据库新特性,用于承载多个可插拔数据库PDB(Pluggable Database)。使用限制 当前数据集成同步数据时,仅支持UTF8、AL32UTF8、AL16UTF16及ZHS16GBK编码格式。Oracle单...

数据库管理

Database的概念 每个正在运行的Lindorm时序引擎实例都管理着一个或多个数据库(简称Database)。在各个Database之间,数据会被隔离。每个Database都有若干时序数据表,结合 名词解释 的描述,我们可以对时序引擎的数据层级归纳为下图所示:...

配置并管理实时同步任务

您需要在数据集成同步任务配置前,配置好您需要同步的源端和目标端数据库,以便在同步任务配置过程中,可通过选择数据源名称来控制同步任务的读取和写入数据库。实时同步支持的数据源及其配置详情请参见 实时同步支持的数据源。说明 数据源...

使用Influx CLI(命令行界面)连接TSDB For InfluxDB...

USE mydb Using database mydb 将单个数据点写入数据库mydb。INSERT cpu,host=serverA,region=us_west value=0.64 这条语句将一个数据点写入数据库mydb的默认保留策略中。其中,cpu 是measurement,host 和 region 是tag,value 是field,...

一键实时同步至Hologres

数据集成附加字段支持的变量字段如下:EXECUTE_TIME:执行时间 UPDATE_TIME:更新时间 DB_NAME_SRC:原始数据库名称 DB_NAME_SRC_TRANSED:转换后数据库名称 DATASOURCE_NAME_SRC:源端数据源名称 DATASOURCE_NAME_DEST:目的端数据源名称 ...

离线同步至MaxCompute

您需要在数据集成同步任务配置前,配置好您需要同步的源端和目标端数据库,以便在同步任务配置过程中,可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源与读写能力。说明 数据...

离线同步能力说明

数据集成的离线同步功能为您提供数据读取(Reader)和写入插件(Writer),方便您通过定义来源与去向数据源,并结合DataWorks调度参数使用,将源端数据库中全量或增量数据的同步至目标数据库中。本文为您介绍离线同步的相关能力。使用限制 ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 云数据库 RDS 云数据库 Redis 版 云服务器 ECS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用