常见问题
迁移与同步 为什么OSS外表导入ORC、PARQUET等格式的数据，出现内存报错或OOM挂掉？如何处理导入数据报错：too many parts？为什么DataX导入速度慢？为什么Hive导入后其数据行数跟ClickHouse对不上？为什么Kafka导入后其数据行数跟...
常见问题
在将数据导入至MergeTree表的时候，初始时后台线程可能找不到任何可以进行Merge的Data Part，此时所有的资源都在处理导入的数据从接收到刷写到磁盘这一步骤，所以导入数据的速率相对来说比较高。导入数据一段时间后，由于越来越多Data Part...
监控与报警
InboundRatelimitDropBandwidth userId、instanceId、regionNo Value 入方向限速丢包速率 当前接入点入方向限速丢包时，被丢弃的数据包速率。单位：pps。InboundRatelimitDropSpeed userId、instanceId、regionNo Value 出方向带宽 当前接...
配置Hologres输入组件
输入过滤 配置Hologres输入组件读取数据时需要过滤掉的数据。例如，ID>112。输出字段 输出字段区域展示了已选中表的所有字段。如果不需要将某些字段输出至下游组件，则您可以删除对应的字段：如果需要删除少量的字段，则可以单击 操作 列下...
配置Hologres输入组件
输入过滤 配置Hologres输入组件读取数据时需要过滤掉的数据。例如，ID>112。输出字段 输出字段区域展示了已选中表的所有字段。如果不需要将某些字段输出至下游组件，则您可以删除对应的字段：如果需要删除少量的字段，则可以单击 操作 列下...
升级数据库大版本
迁移数据的方法如下：云数据库MongoDB版（单节点架构）全量迁移至云数据库MongoDB版（所有架构）云数据库MongoDB版（副本集架构）迁移至云数据库MongoDB版（副本集架构或分片集群架构）自建数据库MongoDB版（分片集群架构）迁移至云数据库...
数据库导出
当您需要进行数据库备份、导出数据库表进行数据分析等操作，您可使用 数据管理DMS 的数据导出功能，该功能可通过提交工单的方式导出数据库。前提条件 数据库类型如下：MySQL系列：自建MySQL、RDS MySQL、PolarDB MySQL版、AnalyticDB ...
高压缩引擎（X-Engine）介绍
随着业务发展，数据库系统中会积累大量访问频率很低甚至为0的数据，这些数据的积累容易导致如下问题：历史数据和最新数据存储在同一数据库系统中，导致磁盘空间不足。大量数据共享数据库系统的内存、缓存空间、磁盘IOPS等，导致性能问题。...
平台安全诊断
平台安全诊断目前支持的安全域说明如下：数据计算与存储安全性诊断 用于对数据权限的控制、数据存储加密、数据存储备份等功能进行安全性诊断，及时识别潜在的安全隐患，提升在数据存储与访问过程中的安全性。数据传输安全性诊断 用于对数据...
功能优势
高维向量数据的高准度和高性能 以典型的人脸512维向量为例，分析型数据库MySQL版向量分析提供百亿向量100 QPS、50毫秒响应时间（RT）约束下99%的数据召回率；两亿向量1000 QPS、1秒 RT约束下99%的数据召回率。结构化和非结构化混合检索 ...
内存型
云原生内存数据库Tair 内存型（简称内存型）适合并发量大、读写热点多、高性能场景，内存型重点增强了多线程性能并集成多个自研扩展数据结构。购买方式 创建实例 主要优势 类别 说明 兼容性 100%兼容原生Redis，无需修改业务代码，提供 ...
企业版和标准版功能对比
主节点和只读节点之间采用Active-Active的Failover方式，提供数据库的高可用服务。最大15个只读节点 最大7个只读节点 多主集群（库表）概述 PolarDB MySQL版 多主集群（库表）实现从一写多读架构到多写多读架构的升级；支持不同数据库在...
终端节点监控项
bit/s 平均值 VpcEndpointInPps 终端节点流入数据包速率 从VPC网络访问终端节点的数据包速率。packet/s 平均值 VpcEndpointOutPps 终端节点流出数据包速率 从终端节点访问VPC网络的数据包速率。packet/s 平均值 VpcEndpointInDropBps 终端...
终端节点服务监控项
bit/s 平均值 VpcEndpointServiceInPps 终端节点服务流入数据包速率 从VPC网络访问终端节点服务的数据包速率。packet/s 平均值 VpcEndpointServiceOutPps 终端节点服务流出数据包速率 从终端节点服务访问VPC网络的数据包速率。packet/s ...
离线同步任务调优
并发数：数据源并发数越高，数据库负载越高。通常，数据库的性能越好，它可以承载的并发数越高，您可以为数据同步作业配置越多的并发数据抽取。网络：网络的带宽（吞吐量）、网速。离线同步任务使用的调度资源组 离线同步任务将有调度资源...
PolarDB MySQL版迁移至MaxCompute
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将 PolarDB MySQL版 集群的数据迁移至MaxCompute。前提条件 已开通MaxCompute并创建MaxCompute项目。更多信息，请参见 开通MaxCompute和DataWorks 和 创建MaxCompute项目。...
常见问题
支持的数据库部署位置（接入方式）阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...
PolarDB-X 1.0迁移至PolarDB-X 2.0
如为增量数据迁移任务，DTS要求源数据库的本地Binlog日志保存24小时以上，如为全量数据迁移和增量数据迁移任务，DTS要求源数据库的本地Binlog日志至少保留7天以上（您可在全量迁移完成后将Binlog保存时间设置为24小时以上），否则DTS可能因...
监控VPN网关实例
监控项 说明 VPN网关入方向数据包速率 VPN网关实例接收数据包的速率。单位：packet/s。VPN网关出方向数据包速率 VPN网关实例发出数据包的速率。单位：packet/s。VPN网关入方向流量速率 VPN网关实例接收流量的速率。单位：bps。VPN网关出...
新建注册上挂指标
您可以将物理表中的指标字段上挂至汇总逻辑表进行数据分析。本文为您介绍如何为汇总逻辑表新建注册上挂标签。前提条件 完成派生指标的创建，详情请参见 创建派生指标。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 ...
新建注册上挂指标
您可以将物理表中的指标字段上挂至汇总逻辑表进行数据分析。本文为您介绍如何为汇总逻辑表新建注册上挂标签。前提条件 完成派生指标的创建，详情请参见 创建派生指标。操作步骤 登录 Dataphin控制台。在Dataphin控制台页面，选择工作区地域...
监控转发路由器实例
流入包速率 转发路由器实例从网络实例连接接收的数据包速率。单位：pps。流出包速率 转发路由器实例向网络实例连接发送的数据包速率。单位：pps。流入流量字节数 转发路由器实例从网络实例连接接收的流量字节数。单位：Byte。流出流量字节...
功能简介
通过统一的数据资产目录，沉淀数据供给方生产的各类型数据，帮助数据使用者快速了解和获取业务需要的高质量数据资产，促进数据资产发挥更大的业务价值。同时，通过查看数据资产全局血缘，清晰的了解数据资产的上下游关联。概览 对数据资产...
功能简介
通过统一的数据资产目录，沉淀数据供给方生产的各类型数据，帮助数据使用者快速了解和获取业务需要的高质量数据资产，促进数据资产发挥更大的业务价值。同时，通过查看数据资产全局血缘，清晰的了解数据资产的上下游关联。概览 对数据资产...
监控与报警
入方向限速丢包速率 EIP实例入方向因带宽限速，被丢弃的数据包速率。单位：pps。出方向限速丢包速率 EIP实例出方向因带宽限速，被丢弃的数据包速率。单位：pps。网络流入带宽利用率 外部访问EIP实例所消耗的带宽占该EIP实例总带宽的百分比...
基本概念
用户可以选择多个Mongos作为请求的入口，防止其中一个挂掉所有的MongoDB请求都无法操作。Shard MongoDB分片集群中的分片。单个Shard是由三节点的副本集组成，保证单个分片的高可用性，用户可以根据自己的应用性能及存储要求，购买多个Shard...
查看云企业网资源监控信息
对于带宽峰值速率相关指标，系统在1分钟内每6秒采集一个带宽速率数据点，共采集10个带宽速率数据点，取10个数据点中的最大值作为这1分钟的带宽峰值速率。通过带宽峰值速率可以观测到秒级的微突发流量。支持在监控指标折线图的上方调整查看3...
数据湖管理FAQ
“库/表/文件”或者“库/表/分区/./分区/文件”高 高 自由模式 已存在OSS数据，但OSS的路径不清晰。期望通过元信息发现，构建可分析的库表分区。无要求 一般 一般 为什么Excel导出的CSV文件没有被识别建表？目前元数据发现支持的是CSV文本...
什么是数据管理DMS
DMS提供全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，致力于帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。视频介绍 功能特性 详情信息，请参见 功能概览。为什么选择数据管理DMS 全域数据...
监控与报警
云监控（CloudMonitor）可以...出限速丢包速率 共享带宽 实例出方向限速丢包时，被丢弃的数据包速率。单位：pps。入限速丢包速率 共享带宽 实例入方向限速丢包时，被丢弃的数据包速率。单位：pps。相关文档 附录1 云产品监控指标 创建报警规则
功能简介
AnalyticDB PostgreSQL版 的企业数据智能平台是数据资产定义、加工、管理、服务的全流程平台，提供数据同步、数据查询、数据建模、数据开发、质量评估、资产管理等功能，为智能数据应用持续稳定供给全量、标准、干净、智能的数据资源。...
SAG App流量监控
管理员可以在智能接入网关SAG（Smart Access Gateway）管理控制台查看智能接入网关App实例的流量数据，方便管理员监控带宽使用情况。操作步骤 登录 智能接入网关管理控制台。在左侧导航栏，选择 智能接入网关App>App实例管理。在顶部菜单栏...
什么是数据传输服务DTS
数据传输服务DTS（Data Transmission Service）是阿里云提供的实时数据流服务，支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助您构建...
创建StarRocks数据源
通过创建StarRocks数据源能够实现Dataphin读取StarRocks的业务数据或向StarRocks写入数据。本文为您介绍如何创建StarRocks数据源。背景信息 StarRocks是一款高性能分析数据库，支持实时、多维和高度并发的数据分析。StarRocks具有高度可...
创建StarRocks数据源
通过创建StarRocks数据源能够实现Dataphin读取StarRocks的业务数据或向StarRocks写入数据。本文为您介绍如何创建StarRocks数据源。背景信息 StarRocks是一款高性能分析数据库，支持实时、多维和高度并发的数据分析。StarRocks具有高度可...
应用场景
数据库网关与数据管理DMS搭配可为您提供高稳定性、低成本、统一的非阿里云数据库（例如本地IDC自建、其他云厂商的云数据库、其他云厂商云服务器上自建的数据库）的通用管理方案，实现多云统一的数据库管理服务，架构图如下所示。...
应用场景
数据库网关与数据管理DMS搭配可为您提供高稳定性、低成本、统一的非阿里云数据库（例如本地IDC自建、其他云厂商的云数据库、其他云厂商云服务器上自建的数据库）的通用管理方案，实现多云统一的数据库管理服务，架构图如下所示。...
数据域
数据域是联系较为紧密的数据主题的集合，通常是根据业务类别、数据来源、数据用途等多个维度，对企业的业务数据进行的区域划分，将同类型数据存放在一起，便于您快速查找需要的内容。不同使用目的数据，分类标准不同。例如，电商行业通常...
导出数据
配置项 说明 原因类别 选择数据导出的原因，方便后续查找。业务背景 详细描述变更原因或目标，减少沟通成本。相关人 设置的相关人员可查看工单，并协同工作，非相关人员则不能查看工单（管理员、DBA除外）。导出SQL语句 输入导出SQL语句。...
什么是PolarDB MySQL企业版
主节点和只读节点之间采用Active-Active的Failover方式，提供数据库的高可用服务。计算与存储分离 PolarDB 采用计算与存储分离的设计理念，满足公共云计算环境下根据业务发展弹性扩展集群的刚性需求。数据库的计算节点（Database Engine ...
- 产品推荐
- 这些文档可能帮助您