2021年8月24日 产品更新动态
新增【挂机原因】节点类型，支持根据IVR路径自定义挂机的原因标签。有如下逻辑：可配置多个挂机原因节点，但向后只能连挂机节点-【挂机原因】节点中，可配置共7种挂机原因-挂机原因节点非必须，各个节点可以直接连到挂机节点，此时会打上...
如何结束 AHAS Agent 进程？
这一功能保证了进程可用性，避免进程因异常挂掉或机器重启等原因，需要手动拉起的情况。所以，您在服务器进程中结束 AHAS Agent 无法永久结束该进程，AHAS 会在定时检查后或机器重启时，自动拉起该进程。如果您某段时间不需要使用 AHAS ...
强弱依赖治理概述
强弱依赖治理的应用 强弱依赖治理主要可以被应用到以下场景：系统改造验收：对于分布式系统，至少在运行态中，不会因为依赖的系统后台出现故障，引起当前应用出现系统级可用性的故障，例如进程挂掉、频繁FullGC、负载飙高等，何时何地都应...
发布者最佳实践
默认情况下，云消息队列 Kafka 版 为了提升可用性，并不保证单个分区内绝对有序，在升级或者宕机时，会发生少量消息乱序（某个分区挂掉后把消息Failover到其它分区）。如果业务要求分区保证严格有序，请在创建Topic时选择使用Local存储。
DescribeScalingGroupDetail-查询指定伸缩组详情
查看指定伸缩组的基本...开启后，当收到抢占式实例将被回收的系统消息时，伸缩组将尝试创建新的实例，替换掉将被回收的抢占式实例。true LaunchTemplateVersion string 实例启动模板的版本。Default RegionId string 伸缩组所属的地域 ID。...
Redis客户端重连指南
引发暂时性故障的原因 原因 说明 故障触发了高可用机制 云数据库Redis支持节点健康状态监测，当监测到实例中的主节点不可用时，会自动触发主备切换，例如将主节点和从节点进行互换，保障实例的高可用性。此时，客户端可能会遇到下列暂时性...
配置生命周期挂钩
生命周期挂钩可以暂停由弹性伸缩自动触发的伸缩活动，使ECS实例或ECI实例处于挂起中的状态（即等待的状态），为您保留一段自定义操作的时间以满足特定的部署需求和业务场景，例如预装软件等。直至生命周期挂钩超时结束后，弹性伸缩的伸缩...
常见问题
迁移与同步 为什么OSS外表导入ORC、PARQUET等格式的数据，出现内存报错或OOM挂掉？如何处理导入数据报错：too many parts？为什么DataX导入速度慢？为什么Hive导入后其数据行数跟ClickHouse对不上？为什么Kafka导入后其数据行数跟...
Blink和Flink常见问题及诊断
CONNECTION CLOSED 可能是负载过大导致后端节点挂掉了，出现OOM（Out Of Memory）或者Coredump。解决方法：请先重试写入，如果不能恢复请找Hologres技术支持人员排查原因。报错：BackPresure Exceed Reject Limit 可能原因：通常是Hologres...
顺序消息
生产顺序性和消费顺序性组合 如果消息需要严格按照先进先出（FIFO）的原则处理，即先发送的先消费、后发送的后消费，则必须要同时满足生产顺序性和消费顺序性。但一般业务场景下，同一个生产者可能对接多个下游消费者，不一定所有的消费者...
常见问题
为什么我的Worker节点挂掉了？如何查看Trino日志？为什么查询不到数据或查询失败？为什么查询Hudi或Delta表时列的顺序错了？为什么新增一个配置后，重启Trino失败？为什么使用Hive连接器查询Iceberg、Hudi或Delta Lake表时会报错Cannot ...
算子探查（公测）
数据正确性问题的产生原因复杂且不易定位，常见的解决方法是将SQL作业进行逻辑拆解，通过Print连接器打印每一步的结果，对数据结果进行分析，找到可能的原因。这个处理流程不仅耗费时间精力，而且可能因为测试数据与线上数据或者State不...
算子级别诊断结果
建议 如果是查询语句使用了Hint或集群使用了配置，导致的过滤条件下推功能关闭，请检查使用该Hint或配置的原因并判断是否可以取消该Hint或配置。更多详情，请参见 过滤条件不下推。如果是使用了函数，可以考虑是否直接使用该函数写入数据，...
TestNetworkConnection
ConnectMessage String 可连通 测试目标数据源与其所使用资源组的网络连通性失败后的原因描述。如果数据源与资源组网络连通性测试成功，则该参数的返回值为空。ConnectStatus Boolean true 测试目标数据源与其所使用资源组网络连通性的结果...
日志位点监控
以下几种情况可能导致checkpoint位点延迟：一致性位点延迟会导致checkpoint位点延迟，需要优先排查一致性位点延迟的原因。导致一致性位点延迟的原因均可能导致checkpoint位点延迟，例如业务中有批量数据修改或者刷脏不及时。checkpoint执行...
云数据库RDS MySQL版主实例与只读实例之间存在复制...
如果存在上述情况，则参考以下内容进行针对性的处理：原因一：执行过涉及数据量较大的DDL语句 请避免在业务高峰期执行此类DDL语句。原因二：对单表执行过大量的DML语句或者高频次的DML语句 请优化SQL语句，尝试分批多次提交SQL语句，并且...
生命周期挂钩概述
弹性伸缩会自动触发扩缩容活动，并触发生命周期挂钩使伸缩活动中的ECS实例或ECI实例处于挂起中的状态（即等待的状态），为您保留一段自定义操作的时间，直至生命周期挂钩超时结束。生命周期挂钩主要支持设置以下功能：说明 如果您想了解...
离线同步常见问题
文档概述 问题分类 相关文档 离线同步任务运维常见问题 为什么数据源测试连通性成功，但是离线同步任务执行失败？如何切换数据集成任务执行资源组？脏数据如何排查和定位？如何查看脏数据？如果离线同步传输数据时，脏数据超出限制，是否...
MongoDB 4.4功能概览
复合哈希分片键（Compound Hashed Shard Keys）在4.4之前的版本中，您只能指定单字段的哈希片键，原因是当时版本的MongoDB不支持复合哈希索引，这样就很容易导致集合数据在分片上分布不均匀。在最新的4.4版本中加入了复合哈希索引，即您...
DATASOURCE:ESS:ScalingGroups
BALANCE：在伸缩组指定的多可用区之间均匀分配ECS实例。如果由于库存不足等原因可用区之间变得不平衡，您可以通过API RebalanceInstances 平衡资源。StoppedCapacity Number 伸缩组中处于节省停机效果的实例数量。无 DBInstanceIds List ...
优化内部表的性能
本文为您介绍在Hologres中对内部表性能进行调优的最佳实践。更新统计信息 统计信息决定是否能够生成正确的执行计划。...产生OOM的原因有多种，比如计算复杂、并发量高等，可以根据不同的原因进行针对性优化，从而减少OOM。详情请参见...
SmartData常见问题
JindoFS Block模式的元数据的更新支持异步备份至阿里云Tablestore数据库上，在确保生产集群停止更新，所有修改同步至Tablestore后，可以停掉JindoFS集群，此时，所有数据在OSS和Tablestore上。重建集群时，恢复OSS和Tablestore上数据至重建...
监控指标常见问题
可以通过慢Query日志排查Query总的失败数量和失败原因，并根据报错针对性的解决，详情请参见 慢Query日志查看与分析。Worker CPU负载不均如何解决？在Hologres中数据分片（Shard）决定了数据的分布情况，一个Worker在计算时可能会访问一个...
Node应用内存泄漏分析方法论与实战
打开 sandbox 一看进程生命周期，果然如此,进程 1694 挂了，然后重新启动了一个 29649 进程。从上图中也可以看到RSS（实际使用物理内存）高达1880.93MB，至此基本上可以确定是内存泄漏了。查看内存占用曲线，内存呈现锯齿状，先一路飙升，...
EMR Kafka磁盘故障运维
如果业务优先保证服务可用，但允许丢失部分数据，则应考虑在可能会丢失数据的情况下，先恢复服务可用性。如果业务不允许数据丢失，但能容忍服务较长时间不可用，则需要考虑如何尽可能的避免丢失数据的情况出现。如果业务需要高可用与数据不...
nodepool
开启后，当收到抢占式实例将被回收的系统消息时，伸缩组将尝试创建新的实例，替换掉将被回收的抢占式实例。取值：true：开启补齐抢占式实例。false：不开启补齐抢占式实例。false compensate_with_on_demand boolean 当 multi_az_policy ...
nodepool
开启后，当收到抢占式实例将被回收的系统消息时，伸缩组将尝试创建新的实例，替换掉将被回收的抢占式实例。取值：true：开启补齐抢占式实例。false：不开启补齐抢占式实例。false compensate_with_on_demand boolean 当 multi_az_policy ...
nodepool
开启后，当收到抢占式实例将被回收的系统消息时，伸缩组将尝试创建新的实例，替换掉将被回收的抢占式实例。取值：true：开启补齐抢占式实例。false：不开启补齐抢占式实例。false compensate_with_on_demand boolean 当 multi_az_policy ...
管理导入任务
max-filter-ratio：导入任务的最大容忍率，即导入任务能够容忍的因数据不规范等原因而过滤掉的数据行所占的最大比例。jobDetails 导入任务的详细信息，包括任务数量、文件数量和大小、数据量、行数等。errorMessage 导入任务的失败原因。当...
运行失败
在seek阶段M-R1-R2的R1到R2的过程，会将这些数据交给同样的Reducer去执行，导致数据倾斜，造成某个Reduce Job挂掉。小类目检索准备阶段GetSmallCategoryDocNum为空 报错信息 解决方法 该问题的主要原因是表当中某些字段的值为空，比如 ...
HTTPDNS解析结果IP的连通性
问题描述 HTTPDNS解析结果IP的连通性是无序的 问题原因 HTTPDNS服务器将终端用户的IP信息直接交付给权威DNS，根据终端用户的IP信息进行精准调度返回就近节点，但是并不对结果ipList进行排序。解决方案 可以配置IP探测 setIpProbeItems()来...
常见报错
可能原因：偶发性错误。解决方法：请重试。若异常无法解决，请 通过钉钉（钉钉通讯客户端下载地址）进入到DTS客户交流钉钉群（群号：68325004196或68640008972），进行咨询。DTS.Msg.DbListIsEmpty 报错场景：使用API配置任务时。可能原因...
CompleteLifecycleAction-提前结束伸缩活动的等待状态
在挂起弹性收缩活动的生命周期挂钩类型为 CONTINUE 时，或者对弹性扩张活动，后续生命周期挂钩会继续挂起伸缩活动，直到最后一个生命周期挂钩触发的等待状态结束。最终的下一步动作以最后一个结束等待状态的生命周期挂钩类型为准。CONTINUE...
CompleteLifecycleAction
在挂起弹性收缩活动的 CONTINUE 类型生命周期挂钩时，或者对于弹性扩张活动，后续生命周期挂钩会继续挂起伸缩活动，直到最后一个生命周期挂钩触发的等待状态结束。最终的下一步动作以最后一个结束等待状态的生命周期挂钩类型为准。...
生命周期挂钩和OOS模板最佳实践概述
弹性伸缩的生命周期挂钩功能支持选择OOS模板作为通知方式，在挂起实例的同时执行指定的OOS模板中定义的运维操作，实现自动化运维。生命周期挂钩 触发伸缩活动后，弹性伸缩会自动完成扩缩容流程，期间ECS实例的服务状态变化请参见 伸缩组内...
查看逻辑表和物理表一致性
通过查看逻辑表和物理表一致性能够快速对比逻辑表和物理表的一致性，以便及时更新物理表，保证逻辑模型和物理表的一致性。本文介绍如何查看逻辑表和物理表的一致性。前提条件 已新建逻辑表，具体操作，请参见 通过Excel导入逻辑表、通过云...
查看逻辑表和物理表一致性
通过查看逻辑表和物理表一致性能够快速对比逻辑表和物理表的一致性，以便及时更新物理表，保证逻辑模型和物理表的一致性。本文介绍如何查看逻辑表和物理表的一致性。前提条件 已新建逻辑表，具体操作，请参见 通过Excel导入逻辑表、通过云...
使用生命周期挂钩确保服务可用
挂起状态结束后，ECS实例或ECI实例会被移出伸缩组，保障了应用服务的可用性。相关文档 通过API方式为伸缩组添加一个或多个负载均衡CLB实例（原SLB），更多信息，请参见 AttachLoadBalancers。通过API方式为伸缩组添加一个或多个负载均衡ALB...
源库连接性检查
本文将介绍源库连接性检查失败的可能原因及修复方法。当源库连接性预检查失败时，可能是以下几种原因。数据库账号名或密码不正确 报错示例 Access denied for user 'XXX'@'XXX'(using password:YES)检测方法 使用命令行或客户端连接源数据...
基本概念
用户可以选择多个Mongos作为请求的入口，防止其中一个挂掉所有的MongoDB请求都无法操作。Shard MongoDB分片集群中的分片。单个Shard是由三节点的副本集组成，保证单个分片的高可用性，用户可以根据自己的应用性能及存储要求，购买多个Shard...
- 产品推荐
- 这些文档可能帮助您