使用高效方式获取指标数据
大量调用查询监控数据API通常是因为要近似实时的查询监控指标，而不停循环调用所致。此种方式实现弊端很多，例如：实现复杂度高、数据易丢失、操作重复和数据实时性差。因此对于实时查询监控数据的场景，更推荐使用企业云监控的实时数据...
RDS安全
RDS慢SQL检测 RDS大批量数据删除告警 RDS外网访问检测 RDS查询SQL平均执行时间监控告警 RDS数据库更新峰值监控告警 RDS数据库查询峰值监控告警 RDS实例释放告警 RDS高频访问IP检测 RDS更新SQL平均执行时间监控告警 RDS登录失败次数过多告警...
topRegion分析
上图是查询每秒内读请求数据量最大的五个分片，再将属于同一张表的分片聚合在一起，并按照分片读请求数据量的值升序排列后的结果。TopRegion历史快照 TopRegion历史快照支持查询某一历史时间点的热点分片。选择 idc、分组 和 历史快照。...
概述
存储格式 数据来源及特点 数据量增大或减少 详细数据量 JSON 大量应用产生JSON类型的数据，冗余数据量大。增大151.7%3.02GB AVRO Hadoop生态格式的数据，数据由大部分遗留系统产生。增大8.3%1.3GB RCFile Hadoop生态格式的数据，数据由大...
流量诊断
上图是查询每秒内读请求数据量最大的五个分片，再将属于同一张表的分片聚合在一起，并按照分片读请求数据量的值升序排列后的结果。实时查询热点Key 在左侧导航栏中，选择 流量诊断>topregion/key实时查询。设置筛选条件，包括排序维度、...
ListDoctorHiveTables-批量获取Hive表分析结果
Day growth count of empty files HotDataDayGrowthSize object 热数据的数据量日增量大小。热数据指的是 7 日内有访问的数据。Name string 指标名称。hotDataDayGrowthSize Value long 指标值。203431 Unit string 指标单位。MB ...
表设计规范
分区数量和数据量建议 建议单个分区中的数据量不要太大。应尽量避免分区数据倾斜，避免单个表不同分区的数据量差异超过100万。分区设计时应合理规划分区个数，较细粒度的分区在跨分区扫描时会影响SQL的执行性能。单个分区中数据量较大的...
Agent自动扩容能力说明
Agent副本数量不足可能会导致Agent频繁地因内存溢出而重启，进而导致数据采集延迟甚至丢失。...Agent自监控大盘监控数据的详细信息，请参见 Prometheus Agent自监控大盘。相关文档 您可以参考 探针设置，来查看Agent状态和数量。
Agent自动扩容能力说明
Agent副本数量不足可能会导致Agent频繁地因内存溢出而重启，进而导致数据采集延迟甚至丢失。...Agent自监控大盘监控数据的详细信息，请参见 Prometheus Agent自监控大盘。相关文档 您可以参考 探针设置，来查看Agent状态和数量。
入湖基础操作
关系数据库全量入湖：可以实现RDS MySQL或PolarDB数据库表数据全量同步到数据湖，选择在数据源管理中配置好的数据源，将数据源对应数据库中选定表的数据全量同步到OSS中，如果待同步表中数据量大，则所消耗的资源也会比较大，建议在业务...
数据扫描和识别
扫描时长将由您所需扫描的数据量决定。当存在大量数据表时（例如：表数量超过10000张），或者OSS文件总量特别大（例如：OSS总量超过PB）时，扫描周期会相应延长。在 DSC 扫描数据的过程中，已经完成扫描的阶段性结果，会在 数据安全中心...
概览
步骤三 创建监控大盘，具体操作如下：创建业务大盘 创建系统预置大盘 创建自定义大盘 线下IDC、阿里云产品和其他云厂商服务的监控数据接入云监控后，您可以为监控数据创建监控大盘，通过监控大盘查看指定监控指标的监控图表。您可以通过...
东软案例
目前，东软在物联网、互联网等新场景下面临的IT系统运维主要问题与挑战有：多模型数据融合分析困难，面向海量数据采集终端同时写入数据的并发能力弱，数据量大且价值密度低导致存储成本高，基于开源软件自建数据存储集群稳定性低运维成本...
管理指标仓库
企业云监控通过指标仓库存储阿里云、线下IDC、其他云厂商、Prometheus监控、本地日志监控、SLS日志监控和自定义监控的监控数据，您还可以为监控数据创建监控大盘，通过监控大盘查看监控图标。创建指标仓库 本文以将监控数据存储到日志服务...
计费项概述
监控资源包预付费 指标监控数据 按量付费 根据指标监控数据使用量按阶梯计费。单位：元/百万 按量付费（后付费）资源包抵扣 在每个计费周期内按指标监控数据使用量扣除资源包额度。监控资源包预付费 分布式链路请求量 按量付费 费用=每日...
基于多云和混合云场景下的资源监控
您可以通过企业云监控创建一个指标仓库，将多云和混合云的数据汇入到指标仓库中，然后通过监控大盘将监控数据可视化展示，以实现多云和混合云场景化下的一体化监控。本文以混合云（阿里云和线下IDC）下的资源监控为例进行介绍。前提条件 请...
监控报警
监控报警方案 MaxCompute支持通过如下方式实现监控报警功能：通过 阿里云监控服务 配置 监控指标，对包年包月资源、实时作业消费、Tunnel上传下载数据量及作业运行时长 进行监控：通过监控大盘，实时观察监控图表，了解各监控指标的实时...
某网约车公司车辆轨迹数据
随着车辆数量的快速增长，每辆车每分钟上传轨迹、位置等信息到MySQL导致MySQL库数据量过大，将全量数据写到 云原生多模数据库 Lindorm 中可以解决数据量过多和成本问题。业务挑战 目前线下有7万+辆车，车辆数量在快速增长，每辆车每分钟...
计费概述
适用于查询频率高、查询数据量较大的场景，同时也能够给您使用DLA的费用预算带来一定的确定性。说明 若您的业务量波动较大且频繁，每个月甚至每周都可能要变更集群配置，推荐您购买按量付费集群并搭配资源包使用。按计算资源付费（CU版计费...
通过日志监控实现业务日志的监控与报警
前提条件 请确保您已购买日志监控数据处理量。更多信息，请参见 计费标准 和 套餐。请确保您已将本地日志收集到日志服务中。更多信息，请参见 日志服务。背景信息 业务日志的监控和报警原理如下图所示。操作步骤（可选）授权云监控访问日志...
通过日志监控实现日志关键字的监控与报警
前提条件 请确保您已购买日志监控数据处理量。更多信息，请参见 计费标准 和 套餐。请确保您已将本地日志收集到日志服务中。更多信息，请参见 日志服务。背景信息 日志服务中日志的样例如下：2017-06-21 14:38:05[INFO][impl....
如何支持超大事务
场景一 在该场景下，执行SQL语句数量中等，每条语句携带数据量较大，事务写入数据量较大。执行SQL语句数量 2048 每条语句携带的数据量 约256 KB～8 MB 数据修改总量 512 MB～16 GB 数据修改条数 2048 测试过程 测试中，每一条SQL语句形如：...
主机可观测
可观测监控 Prometheus 版 支持通过node-exporter采集ECS Linux或Windows主机操作系统相关指标，也支持process-exporter采集进程相关监控数据，另外基于textfile的方式也支持采集用户写到文件中自定义监控指标。前提条件 已创建ECS实例。...
主机可观测
可观测监控 Prometheus 版 支持通过node-exporter采集ECS Linux或Windows主机操作系统相关指标，也支持process-exporter采集进程相关监控数据，另外基于textfile的方式也支持采集用户写到文件中自定义监控指标。前提条件 已创建ECS实例。...
什么是可观测监控 Prometheus 版
Prometheus实例 for 云服务 阿里云云服务 提供各阿里云云服务（ECS、RDS、SLB等）的监控数据。提供对应的Grafana监控大盘和告警。适合需要通过 可观测监控 Prometheus 版 来统一采集、存储和显示阿里云云服务的监控数据的场景。Prometheus...
什么是可观测监控 Prometheus 版
Prometheus实例 for 云服务 阿里云云服务 提供各阿里云云服务（ECS、RDS、SLB等）的监控数据。提供对应的Grafana监控大盘和告警。适合需要通过 可观测监控 Prometheus 版 来统一采集、存储和显示阿里云云服务的监控数据的场景。Prometheus...
表设计最佳实践
拉链表的设计 在数据仓库的数据模型设计过程中，经常会遇到如下需求：数据量较大。表中的部分字段被更新。例如，用户的地址、产品的描述信息、订单的状态和手机号码等。需要查看某一个时间点或时间段的历史快照信息。例如，查看某一个订单...
查看监控信息
A：查询的返回结果数据量大，导致结果集缓存耗时长，而诊断与优化页面的总耗时=排队耗时+执行计划耗时+执行耗时，不包括结果集缓存耗时。建议您在SQL审计页面查看对应的耗时SQL。相关文档及API 相关文档 调优集群性能 相关API 数仓版A PI ...
调优集群性能
您可以通过 一键诊断 功能来定位存在问题的查询：Bad SQL检测结果中，高耗时的SQL、数据读取量大的SQL、Stage个数多的SQL、最耗CPU的SQL，都可能导致集群的CPU使用率增高，需要根据自诊断结果或者执行计划进行进一步的分析。异常Pattern...
添加并使用云监控数据源
ARMS的 可观测可视化 Grafana 版 默认安装云监控数据源插件。通过此插件，可实现云监控数据同步并实时呈现在Grafana大盘中。您无需手动获取或迁移数据。本文介绍如何通过云监控数据源插件同步云监控数据，并使用云监控数据源创建大盘面板。...
性能监控最佳实践
混合模式是指将统计数据通过公网统一上报，进行集中处理（数据量小，精度要求高），而链路数据采用跨云查询方式进行检索（数据量大，查询频率低）。仅透传模式是指每个云环境之间仅保证链路上下文能够完整透传，链路数据的存储与查询独立...
通过Prometheus监控获取ARMS应用监控数据
阿里云 可观测监控 Prometheus 版 默认集成了ARMS应用监控数据源，您可以直接在 可观测监控 Prometheus 版 下获取应用监控相关数据、查看应用监控预置大盘，并根据需求进行二次开发。前提条件 已为应用安装探针，具体操作，请参见 应用监控...
查看网络监控大盘
您可以查看云服务器ECS公网IP地址和绑定在ECS上弹性公网IP（EIP）的监控数据。云监控默认为您提供公网流出带宽、公网流入带宽和公网流出带宽使用率（经典网络）的监控大盘。背景信息 网络监控大盘中的数据包括同地域公网IP地址和跨地域公网...
监控
本文汇总了 AnalyticDB for MySQL 中监控的常见问题及解决方法。说明 当常见问题场景中未明确产品系列时，表明该问题仅适用于 ...查询结束后，如果返回结果数据量大，会在前端节点缓存返回结果，产生结果集缓存耗时。SQL耗时如下图所示：
MongoDB逻辑备份
当您的存储数据量较大时，推荐您购买 DBS存储包（包年包月）抵扣DBS内置存储费用。相比按量付费，DBS存储包更加优惠。存储方式 请选择存储方式，当前支持：内置加密存储（推荐）：使用行业标准的AES256算法（即256位高级加密标准）进行加密...
使用ARMS应用监控数据指标绘制自定义的Grafana大盘
阿里云 可观测可视化 Grafana 版 支持一键集成ARMS应用监控数据源和大盘，如果您需要使用ARMS应用监控数据指标绘制自定义大盘，只需要创建一个Grafana工作区，一键集成ARMS应用监控数据源后，即可根据实际场景重新绘制Grafana大盘。...
使用DTS将华为云文档数据库迁移至阿里云
是否限制增量迁移速率 您也可以根据实际情况，选择是否对增量迁移任务进行限速设置（设置 每秒增量迁移的行数RPS 和 每秒增量迁移的数据量MB），以缓解目标库的压力。说明 仅当 迁移类型 选择了 增量迁移 时才可以配置。配置ETL功能 选择...
使用DTS将MongoDB Atlas数据库迁移至阿里云
是否限制增量迁移速率 您也可以根据实际情况，选择是否对增量迁移任务进行限速设置（设置 每秒增量迁移的行数RPS 和 每秒增量迁移的数据量MB），以缓解目标库的压力。说明 仅当 迁移类型 选择了 增量迁移 时才可以配置。配置ETL功能 选择...
使用DTS将MongoDB Atlas数据库迁移至阿里云
是否限制增量迁移速率 您也可以根据实际情况，选择是否对增量迁移任务进行限速设置（设置 每秒增量迁移的行数RPS 和 每秒增量迁移的数据量MB），以缓解目标库的压力。说明 仅当 迁移类型 选择了 增量迁移 时才可以配置。配置ETL功能 选择...
查看与减少数据备份
说明 如果当月全量备份数据量与增量备份数据量之和未超过每月备份数据量免费额度，则不额外收取备份费用，否则超出部分按量付费。更多信息，请参见 备份费用。如果使用了DBS内置存储，还将收取存储费用，更多信息，请参见 存储费用。备份...
- 产品推荐
- 这些文档可能帮助您