概述

数据备份物理空间大小如下图所示:说明 PolarDB 集群 数据备份物理空间大小(上图中①所示):指数据备份的收费对象,物理空间大小是指所有数据备份(快照)独占的物理空间大小之和,PolarDB集群的数据与多个数据备份(快照)会复用相同的...

概述

数据备份物理空间大小如下图所示:说明 PolarDB 集群 数据备份物理空间大小(上图中①所示):指数据备份的收费对象,物理空间大小是指所有数据备份(快照)独占的物理空间大小之和,PolarDB集群的数据与多个数据备份(快照)会复用相同的...

应用场景

实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线,您可以实时接入APP、WEB、IoT和数据库等产生的异构数据,统一管理,并投递到下游的分析、归档等系统,构建清晰的数据流,让您更好的释放数据的价值。...

ECS实例说明

大数据型 使用本地SATA盘作存储数据,存储性价比高,是大数据量(TB级别的数据量)场景下的推荐机型。说明 Hadoop、Data Science、Dataflow和Druid类型的集群支持Core节点;Zookeeper和Kafka类型的集群不支持Core节点。本地SSD型 使用本地...

管理缓存

释放数据是指从Alluxio缓存中删除数据,而不是从底层UFS中删除数据。释放操作后,数据仍然可供用户使用,但对Alluxio释放文件后尝试访问该文件的客户端来讲性能可能会降低。语法 alluxio fs free示例:将 tmp 目录中的所有数据从缓存中释放...

数据质量教程概述

完整性 完整性是指数据的记录和信息是否完整、不缺失。数据的缺失包括数据记录的缺失(表行数异常)和记录中某字段信息的缺失(字段出现空值)。在本教程中,您需要重点关注数据的生产环节(MaxCompute外部表引用的表格存储数据)和加工...

数据质量教程概述

完整性 完整性是指数据的记录和信息是否完整、不缺失。数据的缺失包括数据记录的缺失(表行数异常)和记录中某字段信息的缺失(字段出现空值)。在本教程中,您需要重点关注数据的生产环节(MaxCompute外部表引用的表格存储数据)和加工...

ListDoctorHDFSDirectories-批量获取HDFS目录分析结果

数据指的是 7 日内没有访问的数据,但是 30 日以内有访问的数据。coldDataSize:冷数据数据量大小。冷数据指的是 30 日内没有访问的数据,但是 90 日以内有访问的数据。freezeDataSize:极冷数据数据量大小。极冷数据指的是 90 日以内...

ListDoctorHiveTables-批量获取Hive表分析结果

数据指的是 7 日内没有访问的数据,但是 30 日以内有访问的数据。coldDataSize:冷数据数据量大小。冷数据指的是 30 日内没有访问的数据,但是 90 日以内有访问的数据。freezeDataSize:极冷数据数的据量大小。极冷数据指的是 90 日以内...

数据模型

数据时效(TTL)数据时效是指数据保存有效期,超过有效期的数据会被自动清理,默认数据有效期为永久保存。场景示例 某风力电厂包含一系列的智能风力发电机设备,创建名为 Wind-generators 的table来存储所有设备的信息,设备由 ID、型号、...

计费模式

元数据对象的存储量 元数据对象是指数据湖元数据中存储的数据库、表、分区和索引。计费规则,每月前100万个存储对象免费,超过100万后,超过100万的部分,每10万个对象收费5元/月,不足10万的按10万个收费。计费周期与出账周期,按月统计...

GetDoctorHDFSCluster-获取HDFS分析结果

数据指的是 7 日内没有访问的数据,但是 30 日以内有访问的数据。Name string 指标名称。warmDataSize Value long 指标值。4062349775577 Unit string 指标单位。MB Description string 指标描述。Size of the warm data size ...

GetDoctorHDFSDirectory-获取HDFS特定目录分析结果

数据指的是 7 日内没有访问的数据,但是 30 日以内有访问的数据。Name string 指标名称。warmDataSize Value long 指标值。4062349775577 Unit string 指标单位。MB Description string 指标描述。Size of the warm data size ...

GetDoctorHiveTable-获取Hive表分析结果

数据指的是 7 日内没有访问的数据,但是 30 日以内有访问的数据。Name string 指标名称。warmDataSize Value long 指标值。14981 Unit string 指标单位。MB Description string 指标描述。Size of the warm data size ColdDataSize ...

GetDoctorHiveDatabase-获取Hive库信息

数据指的是 30 日内没有访问的数据,但是 90 日以内有访问的数据。Name string 指标名称。coldDataSize Value long 指标值。1000 Unit string 指标单位。MB Description string 指标描述。Ratio of cold files FreezeDataSize object 极...

ListDoctorHiveDatabases-批量获取 Hive 库信息

数据指的是 30 日内没有访问的数据,但是 90 日以内有访问的数据。Name string 指标名称。coldDataSize Value long 指标值。1000 Unit string 指标单位。MB Description string 指标描述。Ratio of cold files FreezeDataSize object 极...

GetDoctorHiveCluster-获取 Hive 集群信息

数据指的是 30 日内没有访问的数据,但是 90 日以内有访问的数据。Name string 指标名称。coldDataSize Value long 指标值。1000 Unit string 指标单位。MB Description string 指标描述。Ratio of cold files FreezeDataSize object 极...

配置TiDB输出组件

是指数据输出前和输出完成的一些特殊处理方式,比如为了满足服务的持续可用性,当前步骤写数据执行前先创建目标表Target_A,执行写入到目标表Target_A,当前步骤写数据执行完成后,对数据库中持续提供服务的表Service_B重命名成Temp_C,...

配置TiDB输出组件

是指数据输出前和输出完成的一些特殊处理方式,比如为了满足服务的持续可用性,当前步骤写数据执行前先创建目标表Target_A,执行写入到目标表Target_A,当前步骤写数据执行完成后,对数据库中持续提供服务的表Service_B重命名成Temp_C,...

关联数据

管理对象组 对象是指数据库中特定表和字段的集合。对象组功能可以帮您管理数据库中表和字段的集合。如果自定义规则需要对固定的数据库对象生效,您可以通过新增对象组,直接在自定义规则中使用新增对象组。以下步骤介绍如何新增对象组。...

基本概念

数据范围 数据范围是指存储在数据订阅任务中的增量数据的时间戳范围。默认情况下,数据订阅任务会保留最近24小时的数据。DTS会定期清理过期的增量数据,并更新数据订阅任务的数据范围。说明 增量数据对应的时间戳是指这条增量数据在源库中...

划分数据

数据是指面向业务分析,将业务过程或者维度进行抽象的集合。为保障整个体系的生命力,数据域需要抽象提炼,并长期维护更新。在划分数据域时,既能涵盖当前所有的业务需求,又能让新业务在进入时可以被包含进已有的数据域或扩展新的数据域...

划分数据

数据是指面向业务分析,将业务过程或者维度进行抽象的集合。为保障整个体系的生命力,数据域需要抽象提炼,并长期维护更新。在划分数据域时,既能涵盖当前所有的业务需求,又能让新业务在进入时可以被包含进已有的数据域或扩展新的数据域...

数据校验计费方式

本文介绍DTS数据校验任务的计费方式和计费标准。计费方式 全量数据校验任务当前仅支持按量付费(后付费)的计费方式。说明 按表行数进行校验 的校验模式不收费,按抽样比例进行HASH校验 的校验...校验的数据是指源库中待校验数据的大小。

查看并管理手动运行补数据任务

手动运行补数据任务是指手动运行补数据实例,进行历史数据的回刷。本文将为您介绍如何查看并管理调度类型为手动运行的补数据任务。手动运行补数据任务入口 请参见 运维中心入口,进入 运维 中心。按照下图操作指引,进入 手动运行 补数据...

计费项

数据流量费 数据流量费是指客户端从订阅通道中消费数据所产生的流量费用。数据订阅实例为包年包月(也称为预付费),订阅实例类型为 MySQL,数据订阅配置费类型为 半价配置费+1元/GB数据流量费,从2020年12月18日开始,DTS会对该订阅实例...

查看并管理手动运行补数据任务

手动运行补数据任务是指手动运行补数据实例,进行历史数据的回刷。本文将为您介绍如何查看并管理调度类型为手动运行的补数据任务。手动运行补数据任务入口 请参见 运维中心入口,进入 运维 中心。按照下图操作指引,进入 手动运行 补数据...

查看并管理定时调度补数据任务

定时调度补数据任务是指任务将按照配置的定时调度时间生成并运行补数据实例,进行历史数据的回刷。本文将为您介绍如何查看并管理定时调度类型的补数据任务。定时调度补数据任务入口 请参见 运维中心入口,进入 运维 中心。按照下图操作指引...

高维向量相似度搜索(pgvector)

相关概念及实现原理 嵌入 嵌入(embedding)是指将高维数据映射为低维表示的过程。在机器学习和自然语言处理中,嵌入通常用于将离散的符号或对象表示为连续的向量空间中的点。在自然语言处理中,词嵌入(word embedding)是一种常见的技术...

监控

AnalyticDB for MySQL 集群中包含多个存储节点,磁盘数据使用量是指单个读写节点的最大磁盘使用量,热数据使用量是指所有读写节点的磁盘数据使用量之和。预留模式跨规格变配为弹性模式后,监控界面看到 CPU平均使用率增大,是什么原因?...

备份大小

图中的 归档备份 是指已保留超过2年(730天)的数据备份,数据 是指非归档的数据备份。备份大小说明 与存储空间使用量的关系 数据备份和日志备份存放在备份空间,都不占用存储空间。日志分为本地日志和日志备份。日志 说明 费用 作用 本地...

RDS SQL Server空间不足问题

数据空间的回收通常有如下几种方式:归档数据 删除数据库中不常用的数据(例如早期的历史数据),或者根据需要迁移到其他数据库实例中,或者以其他形式归档保存,通过直接减少数据量来降低已使用数据空间大小。这种方式是控制数据空间增长...

透明数据加密概述

RDS PostgreSQL支持透明数据加密(Transparent Data Encryption,简称TDE),对数据文件进行实时加密和解密,保护用户数据隐私,本文介绍透明数据加密的基本概念和加密原理。什么是透明数据加密 透明数据加密数据文件执行实时I/O加密和...

列存索引如何实现高效数据过滤

基本原理与方法 分区信息剪枝 IMCI的分区剪枝技术是指在查询时根据分区键的条件来过滤不需要查询的分区,从而减少查询的数据量和提高查询效率的技术。IMCI支持的分区类型包括RANGE、LIST、HASH三种。其中,RANGE和LIST分区会把数据表分成...

功能简介

准确性:数据准确性是指数据准确的反映其所建模的“真实世界”的实体。一致性:数据一致性是指确保两个数据集之间或一个数据集内部不同字段间数值或信息的一致。唯一性:数据唯一性是指在一个数据集中,没有重复的记录或信息。时效性:数据...

功能简介

准确性:数据准确性是指数据准确的反映其所建模的“真实世界”的实体。一致性:数据一致性是指确保两个数据集之间或一个数据集内部不同字段间数值或信息的一致。唯一性:数据唯一性是指在一个数据集中,没有重复的记录或信息。时效性:数据...

质量评估

准确性:数据准确性是指数据准确的反映其所建模的“真实世界”的实体。一致性:数据一致性是指确保两个数据集之间或一个数据集内部不同字段间数值或信息的一致。唯一性:数据唯一性是指在一个数据集中,没有重复的记录或信息。时效性:数据...

大数据安全治理的难点

存储 众所周知,大数据系统以数据类型多(结构化、非结构化、半结构化)、数据(动辄PB级别)著称,某些巨头组织一天就能新增数十万甚至数百万张表,如此体量给数据分级分类带来了极挑战,通过人工进行数据分级分类显然是不现实的,...

概述

数据冷存的几种模式 数据冷存是指数据表/索引/物化视图转存入OSS,转存后不再占用或者极少量占用数据库云盘存储空间,从而大大降低数据库的存储成本。数据冷存后,所有的增删改查SQL都透明,无需做任何修改。PolarDB支持的数据冷存模式...

数据迁移与同步FAQ

DTS的数据迁移与数据同步工作原理是什么?DTS的数据迁移与数据同步有什么区别?使用DTS遇到预检查报错,如何解决?什么是数据迁移、数据同步?数据迁移:将Redis数据库中的数据(即键值对)迁移至另一个Redis数据库中。通常迁移完成后即可...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据传输服务 云数据库 RDS 数据库备份 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用