外部表常见问题
查询外部表Tablestore数据慢 问题现象 查询外部表Tablestore的数据慢，同样的业务数据，1个实时写入Tablestore，1个定时写入MaxCompute，两个表结构和数据量一样。查询MaxCompute内部表耗时远小于查询Tablestore外部表。解决措施 这种情况...
产品计费
数据查询费用 0.2元/GB 0.3元/GB 查询冷存储的数据时，按量收取数据查询费用。企业版 V1 和V0 重要 仅企业版 V1收取包年包月的费用。公共云 计费项 计费方式 定价 说明 包年包月的费用 包年包月 40元/实例/月 用于计费的实例数量指您在购买...
MongoDB实例如何获取耗时较长的慢请求信息
云数据库MongoDB默认开启了慢请求分析功能，系统将慢请求的详细信息记录到对应数据库中的system.profile集合内。您可以通过查看system.profile集合的数据获取慢请求信息，详情请参见 分析MongoDB数据库的慢请求。适用于 云数据库MongoDB
使用SDK示例代码消费订阅数据
说明 如果您部署SDK客户端所属的ECS实例与数据订阅通道属于经典网络或同一专有网络，建议通过内网地址进行数据订阅，网络延迟最小。在DTS控制台单击目标订阅实例ID，在 基本信息 页面的 网络 区域，您可以获取网络地址及端口号信息。topic ...
使用SDK示例代码消费订阅数据
在完成数据订阅通道的配置（创建好订阅任务和消费组）后，您可以自行编写SDK示例代码或使用DTS提供的SDK示例代码来订阅数据变更信息，本文介绍示例代码的使用方法。操作步骤 重要 如果数据源是PolarDB-X 1.0或DMS LogicDB，消费订阅数据的...
API概览
DescribeSQLSamples 查询慢 SQL 执行明细的采样数据 查询慢 SQL 执行明细的采样数据。DescribeOasSQLHistoryList 查询 SQL 执行历史 查询 SQL 执行历史信息。DescribeOasTopSQLList 查询 TopSQL 列表 查询诊断系统采集到的 SQL 执行性能...
排查Mongo Shell登录问题
您可以通过DMS或Mongo Shell登录MongoDB数据库，本文介绍使用Mongo Shell登录数据库时出现的典型问题及解决方法。提示connection attempt failed错误 现象：#mongo-host ali12345678.mongodb.rds.aliyuncs....
离线同步日志分析
定位占用该资源的任务，详情请参见 数据同步慢的场景及解决方案。您也可以找到占用该资源的任务列表及责任人，与其协调降低任务并发数。您还可以减少当前同步任务的并发数并重新提交发布任务。还支持您对任务执行资源组进行扩容。详情请...
查询管理SQL
当您的云数据库ClickHouse遇到了性能问题或进行定期维护时，查看慢SQL通常是排查问题的重要手段。通过云数据库ClickHouse控制台您可以轻松实现慢SQL和运行中SQL的监控和管理。背景信息 原始QueryLog表使用过程繁琐，需要进行客户端安装，...
添加ClickHouse数据源
但是由于VPC网络实现机制的原因，有时控制台显示的实例ID并不是DataV数据源配置VPC网络需要的实例ID。因此您需要通过数据库产品的OpenAPI获取DataV需要的VPC实例ID，通常为数据库实例详情中的 VPCCloudInstanceId 或 VPCInstanceId，具体...
添加ClickHouse数据源
网络 数据源可选的网络类型。说明 当前仅支持外网访问。域名 连接数据库的地址。重要 该地址是DataV服务器能够通过公网或阿里云部分Region内网访问您数据库的域名或IP地址。端口 数据库设置的端口。用户名 登录数据库的用户名。密码 登录...
导入概述
如果数据表很多导入比较麻烦可以使用Hive外表，性能会比Broker load导入效果差，但是可以避免数据搬迁。实时数据导入：日志数据和业务数据库的Binlog同步到Kafka后，优先推荐通过 Routine Load 导入StarRocks。如果导入过程中有复杂的多表...
导入概述
如果数据表很多导入比较麻烦可以使用Hive外表，性能会比Broker load导入效果差，但是可以避免数据搬迁。如果单表的数据量特别大，或者需要做为全局数据字典来精确去重可以考虑使用 Spark Load。实时数据导入：日志数据和业务数据库的Binlog...
深度检测
功能说明 您可以通过深度检测功能，检测数据库实例如下指标是否异常：数据库空间使用情况 阻塞死锁数量 慢SQL数据 平均活跃会话 数据库日志增长方式 操作步骤 登录 DAS控制台。在左侧导航栏中，单击 实例监控。找到目标实例，单击实例ID，...
消息模板
数据质量 数据质量 包括 字段规则异常、自定义规则异常、数据源规则异常、指标规则异常、表规则异常。数据服务 数据服务 包括 平均响应时间异常、调用次数异常、错误率异常。修改告警消息模板 在不同模块的页签下，单击 操作 列下的 图标，...
创建同步ADS
4）ADS的写入性能直接影响同步的性能，若ADS实例性能过低，可能导致DataHub同步较慢，数据堆积，严重情况可能因为同步延迟超过生命周期从而丢失数据。创建同步任务 依次进入 项目列表/Project详情/Topic详情 页面 点击右上角的+同步 按钮...
阶段一：基础防护建设
例如：《金融数据安全分级指南 JR/T 0197-2020》《网络安全标准实践指南——网络数据分类分级指引》《信息安全技术个人信息安全规范 GB/T 35273—2020》《信息技术大数据数据分类指南 GB/T 38667-2020》《基础电信企业数据分类分级方法 YD/...
数据组织优化
Clustering 当前痛点 Transactional Table 2.0支持分钟级近实时增量数据导入，高流量场景下可能会导致增量小文件数量膨胀，从而引发存储访问压力大、成本高，并且大量的小文件还会引发Meta更新以及分析执行慢，数据读写I/O效率低下等问题，...
处理慢SQL问题
在定位数据库的性能问题时，查找慢SQL（消耗较高的SQL语句）是比较常用且有效的方法。而高CPU消耗、高执行时间、高IO消耗以及高扫描行数的SQL语句都有可能是慢SQL。您可以通过DAS对数据库进行监控，及时发现并优化慢SQL，解决数据库的性能...
处理CPU使用率高问题
当实例CPU使用率持续较高时，很容易导致数据库访问响应慢，从而导致业务受损。操作视频 异常检测 异常检测：基于机器学习和细粒度的监控数据，DAS实现7 X 24小时的异常检测，相比基于阈值的告警方式，能够更为及时地发现数据库异常变化，并...
离线同步任务调优
本文为您介绍影响数据同步速度的因素、如何通过调整同步任务的并发配置来实现同步速度最大化、作业的限速选项，以及数据同步过慢的场景。文档概述 同步速度受同步任务本身配置、数据库、网络等多方面影响，详情请参见：数据同步速度的影响...
慢日志
数据节点（DN）慢SQL：即物理慢SQL，PolarDB-X 发送到存储层节点的慢SQL，不支持优化操作。每个 PolarDB-X 节点最多保存30天慢日志，超过时间将会被自动删除。慢日志查看 登录 PolarDB分布式版控制台。在页面左上角选择目标实例所在地域。...
常见问题
为什么optimize任务很慢？为什么optimize后数据仍未主键合并？为什么optimize后数据TTL仍未生效？为什么optimize后更新删除操作没有生效？如何进行DDL增加列、删除列、修改列操作？为什么DDL执行慢，经常卡住？如何处理分布式DDL报错：...
数据传输服务（上传）场景与工具
本文为您介绍如何将数据上传至MaxCompute或从MaxCompute下载数据，包括服务连接、SDK、工具和数据导入导出、上云等常见操作。背景信息 MaxCompute提供了多种数据上传下载的通道支持，方便您在各种场景下进行技术方案选型时参考。批量数据...
DMS数据管理预案助力业务大促
在活动大促期间，未做预防措施导致数据库出现问题的案例如下：某运营人员为了统计活动数据执行了慢SQL指令，最终导致业务被拖垮。某研发人员执行了一条结构变更指令，影响了同一数据库下另外一条业务线的活动。性能安全 限制查询与导出的...
性能优化与诊断简介
在RDS PostgreSQL日常运维中，您可以通过数据库自治服务DAS（Database Autonomy Service）来处理数据库故障、优化性能、提升效率、降低运维成本。DAS是一种基于机器学习和专家经验的云服务，实现数据库自感知、自修复、自优化、自运维和自...
慢查询诊断
AnalyticDB PostgreSQL版 提供了慢查询诊断功能，旨在帮助您对慢查询进行诊断、分析和采取优化措施。在使用该功能前，您需要开启慢查询功能。开启后，系统将自动记录超过阈值为1秒的SQL语句，您可以连接到postgres库进行查询和分析。前提...
GetQueryOptimizeDataTrend-获取查询治理趋势数据
调用GetQueryOptimizeDataTrend接口，获取查询治理趋势数据。接口说明 在使用阿里云 SDK 时，需要保证 aliyun-sdk-core 的版本大于 2.1.8，建议使用最新版本。使用 DAS 的 SDK 的版本为 2.1.8 或以上。在使用 SDK 调用 DAS 服务时，需要将...
冷数据归档
冷数据 已经写入了很长时间的数据，通常可以视作归档数据。在时序应用的场景中，这些数据的数据量往往非常庞大，但是极少用于查询。基于冷温热数据的数据量以及查询频度的特点，Lindorm时序引擎实现了对时序数据冷温热分层存储。如下所示：...
数据迁移、同步和恢复区别
数据迁移、同步和恢复的区别如下：数据迁移和恢复的区别 数据迁移和恢复都可以将数据复制到新实例，但是它们之间还有一定的区别：数据迁移主要用于上云迁移，通过数据传输服务DTS将本地数据库、ECS上的自建数据库或第三方云数据库迁移至...
数据迁移、同步和恢复区别
数据迁移、同步和恢复的区别如下：数据迁移和恢复的区别 数据迁移和恢复都可以将数据复制到新实例，但是它们之间还有一定的区别：数据迁移主要用于上云迁移，通过数据传输服务DTS将本地数据库、ECS上的自建数据库或第三方云数据库迁移至...
数据迁移、同步和恢复区别
数据迁移、同步和恢复的区别如下：数据迁移和恢复的区别 数据迁移和恢复都可以将数据复制到新实例，但是它们之间还有一定的区别：数据迁移主要用于上云迁移，通过数据传输服务DTS将本地数据库、ECS上的自建数据库或第三方云数据库迁移至...
数据迁移、同步和恢复区别
数据迁移、同步和恢复的区别如下：数据迁移和恢复的区别 数据迁移和恢复都可以将数据复制到新实例，但是它们之间还有一定的区别：数据迁移主要用于上云迁移，通过数据传输服务DTS将本地数据库、ECS上的自建数据库或第三方云数据库迁移至...
数据归档概述
当线上数据库中的历史数据（访问率很低的数据）越来越多，占用的存储越来越大，以至于会影响数据库的查询性能与业务运转，此时您可以使用 数据管理DMS 的数据归档功能，周期性地将指定表的数据归档至其他数据库或存储服务中。同时，该功能...
云数据库Redis开发运维规范
云数据库Redis拥有极强的性能，阿里云结合多年的运维经验，从业务部署、Key的设计、SDK、命令、运维管理等维度展示云数据库Redis开发运维规范，为您设计高效的业务系统提供参考，帮助您充分发挥Redis的能力。了解Redis性能边界 图 1.Redis...
Tair开发运维规范
存储资源 Streaming慢消费、大Key等会占用大量存储资源，集群架构 下还会导致数据倾斜，无法有效利用所有数据分片。网络资源 扫描全库（KEYS 命令）、大Value、大Key的范围查询（如 HGETALL 命令）等会消耗大量的网络资源，且极易引发线程...
常见错误处理方法
连接异常经常发生在网络闪断，或者数据库服务重启时，您需要在应用程序中就此类异常，添加重试逻辑。如果重试多次仍无法创建连接，请及时 联系我们。数据异常 数据异常通常表现为函数参数无效，数组下标错误，除零，数据格式无效，转移字符...
慢请求
慢请求问题将极大地影响 云原生内存数据库Tair 实例的稳定性。您可在CloudDBA中查看慢日志详细信息，来监控和分析慢请求问题。操作步骤 访问 Tair实例列表，在上方选择地域，然后单击目标实例ID。在左侧导航栏，单击 CloudDBA>慢请求，进入...
慢请求
慢日志明细 默认展示所有慢请求记录的详细信息（执行开始时间、数据库名称、慢查询语句、执行时长、连接数据库的主机地址），您可以单击 设置 进行过滤。说明 如需导出慢日志至本地进行分析，您可以单击 导出慢日志。集群架构与读写分离...
慢SQL
慢日志问题极大地影响数据库的稳定性，当数据库出现负载高、性能抖动等问题时，数据库管理员或开发首先会查看是否有慢日志在执行。数据库自治服务DAS（Database Autonomy Service）支持慢日志分析功能，会统计并分析数据库中执行时间超过...
- 产品推荐
- 这些文档可能帮助您