发布者最佳实践
默认情况下，云消息队列 Kafka 版 为了提升可用性，并不保证单个分区内绝对有序，在升级或者宕机时，会发生少量消息乱序（某个分区挂掉后把消息Failover到其它分区）。如果业务要求分区保证严格有序，请在创建Topic时选择使用Local存储。
列存索引技术架构介绍
MySQL架构在AP场景的缺陷 MySQL架构在执行复杂查询时性能差有多个方面的原因。对比专用的OLAP系统，其性能瓶颈体现在以下方面：MySQL的SQL执行引擎基于流式迭代器模型（Volcano Iterator）实现。该架构在工程实现上依赖大量深层次的嵌套...
2021年8月24日 产品更新动态
新增【挂机原因】节点类型，支持根据IVR路径自定义挂机的原因标签。有如下逻辑：可配置多个挂机原因节点，但向后只能连挂机节点-【挂机原因】节点中，可配置共7种挂机原因-挂机原因节点非必须，各个节点可以直接连到挂机节点，此时会打上...
电商业务多活实践
本文示例以 挂掉杭州单元的productservice 来模拟故障，此时这些0~4990 ID的用户都无法使用服务，在MSHA控制台进行切流操作，这样这部分ID就能使用北京单元提供的服务了。可以看到购物车cartservice没做单元化，所以切流后的购物车就没数据...
常见退信内容分析
因为拒掉的原因很多，所以要从对方返还的信息来判断原因。我方服务器IP地址被对方拒掉。因为拒掉的原因很多，所以要从对方返还的信息来判断原因。请将退信在线提交我们检查核实。确定原因后，我们将联系对方解除屏蔽。Connection timed out...
如何结束 AHAS Agent 进程？
这一功能保证了进程可用性，避免进程因异常挂掉或机器重启等原因，需要手动拉起的情况。所以，您在服务器进程中结束 AHAS Agent 无法永久结束该进程，AHAS 会在定时检查后或机器重启时，自动拉起该进程。如果您某段时间不需要使用 AHAS ...
Dataphin集成任务的日志中没有具体报错，最后任务执行...
问题描述 本文主要描述了Dataphin集成任务的日志中没有具体报错，最后任务执行失败“Dlink command exit with code:247”的原因和...问题原因 内存不足，导致任务挂掉了。解决方案 添加一下内存，然后重跑即可解决。适用于 Dataphin v2.9.7
PolarDB HTAP实时数据分析技术解密
更进一步的提升 PolarDB MySQL版 的分析性能，我们需要引入列式存储：在分析场景，经常需要访问某个列的大量记录。而列存按列拆分存储的方式会避免读取不需要的列。其次，列存由于把相同属性的列连续保存，其压缩效率也远超行存，通常可以...
常见问题
迁移与同步 为什么OSS外表导入ORC、PARQUET等格式的数据，出现内存报错或OOM挂掉？如何处理导入数据报错：too many parts？为什么DataX导入速度慢？为什么Hive导入后其数据行数跟ClickHouse对不上？为什么Kafka导入后其数据行数跟...
运行失败
在seek阶段M-R1-R2的R1到R2的过程，会将这些数据交给同样的Reducer去执行，导致数据倾斜，造成某个Reduce Job挂掉。小类目检索准备阶段GetSmallCategoryDocNum为空 报错信息 解决方法 该问题的主要原因是表当中某些字段的值为空，比如 ...
关键缺陷通知
本文将为您介绍Hologres各版本相关缺陷的修复记录，包括问题描述、影响程度等。您可以通过报错或问题描述，检查您当前的业务中是否产生了相关问题，提前进行问题规避。建议加入实时数仓Hologres交流群联系对应技术支持协助您将产品升级到...
基于MSE云原生网关实现同城多活
云原生网关默认采用多可用区部署，提供了地域级的、跨可用区的全局流量管理能力。在同城多活的场景下，能够确保对跨可用区的多个业务集群的请求实现...可以看到MSE在I可用区的集群挂掉后，可实现秒级切流，切流过程中仅有不到1%的流量损失。
Blink和Flink常见问题及诊断
CONNECTION CLOSED 可能是负载过大导致后端节点挂掉了，出现OOM（Out Of Memory）或者Coredump。解决方法：请先重试写入，如果不能恢复请找Hologres技术支持人员排查原因。报错：BackPresure Exceed Reject Limit 可能原因：通常是Hologres...
常见问题
在分布式事务服务挂掉的情况下，事务是否能正常回滚？分布式事务的服务端会记录下事务的状态并持久化，即使服务挂掉，在服务重新启动后，事务仍然能够正常回滚。建表时，是否可以使用 SQL 的关键字作为列的名称？不可以，建表时列名不能...
满意度调研话术配置
设定意图名称和意图code（名称和code可以随便起名）确定后，进行编辑用户问法，并单独设定开始的问法。填写完成开始两个字后，点击添加（添加完成后，此处触发即可完成）。保存意图后，并将节点引用意图后，进行保存节点。2.4.2、普通节点...
Co、递归调用
前言 我们知道，同步的递归写法，如果在退出递归条件失效时，会快速因为栈溢出导致进程挂掉。而在某些场景下，我们会采用异步的递归写法来规避这个问题：async function recursive(){ if(active)return;do something await recursive();} ...
常见问题
断网后sdk error日志量太大/进程挂掉怎么处理 问题背景 链节点断开后，SDK不断重连，导致进程挂掉。日志量很大。解决方案 SDK从2.23开始，可以设置重连的频率，但是2.23之前的版本没法处理，可升级SDK版本。参数说明 示例一：...
功能发布记录
SDK下载与发布记录 2023-12 功能名称 变更类型 功能描述 相关文档 地址生成器 新增 新增直播封装地址，用户配置完封装配置后，可通过地址生成器直接获取到直播封装的播放地址。封装配置 广目监播 新增 广目监播新增音质检测，可针对监播流...
配置伸缩组
创建伸缩组时需要指定专有网络和交换机，如果该伸缩组所使用的启动模板中也指定了专有网络和交换机，则在弹性扩容时，伸缩组中指定的专有网络和交换机会替换掉启动模板中指定的专有网络和交换机。即最终扩容出的ECS实例位于哪个可用区是由...
时空数据库版本发布记录
新增 ST_AsMVTGeomEx 函数，相较于ST_AsMVTGeom，新增参数res_prec，能更大程度地过滤掉对显示效果影响不大的矢量要素，从而减小后续生成的MVT的大小。地理数据类型增强。ST_LineSubstring 函数新增支持地理数据类型，支持基于球面距离获取...
时空数据库版本发布记录
新增 ST_AsMVTGeomEx 函数，相较于ST_AsMVTGeom，新增参数res_prec，能更大程度地过滤掉对显示效果影响不大的矢量要素，从而减小后续生成的MVT的大小。地理数据类型增强。ST_LineSubstring 函数新增支持地理数据类型，支持基于球面距离获取...
网络FAQ
在不影响正常业务的前提下，清洗掉异常流量，可以将可疑流量从原始网络路径中重定向到净化产品上，识别和剥离恶意流量，转发合法流量到原网络中以及目标系统。云服务器ECS怎么取消流量清洗？当进入ECS实例的流量达到清洗阈值时，无论是否为...
常见报错及解决方案
A：失败的原因主要是上次安装中断残留导致的脏数据，建议处理方法如下：1）全新安装：通过日志提示出来的完整 trident clean xx 命令进行清除，但是此操作会导致所有已安装的程序全部卸载，因此仅适用于新集群。2）原先有其他 K8s：可通过 ...
安全违规信息类型说明
规则背景：《中华人民共和国刑法》、《中华人民共和国网络安全法》、《中华人民共和国反分裂国家法》、《中华人民共和国保守国家秘密法》、《互联网信息服务管理办法》、《互联网宗教信息服务管理办法》、《互联网文化管理暂行规定》、...
性能监控指标
同样的P99 分位数（3s），慢请求全部集中在3-5s区间，和全部集中在10s以上区间所反映的问题严重程度，以及问题背后的原因可能是完全不同的。通过对比不同时段的直方图分布，可以精准发现每一个耗时区间的变化情况。如果业务是面向终端用户...
查询Profile
发送SQL请求，此时查询的Profile信息会被记录 SELECT.FROM.查看查询的 query_id。SHOW QUERY PROFILE"/;Profile ID|Task Type|Start Time|End Time|Total|Task State|User|Default Db|Sql Statement|+-+-+-+-+-+-+-+-+-...
列存索引如何实现高效数据过滤
在读取DataPack时，需要从磁盘中加载进内存并解压缩，然后遍历DataPack中的所有记录，利用过滤条件筛选出符合条件的记录。对于大表而言，这些扫描任务的代价很大，并会对LRU cache造成一定程度的污染，导致整体查询延迟升高，QPS大幅降低。...
不兼容SQL重写
报错信息 FAILED:ODPS-0130071:[2,45]Semantic analysis exception-column rn cannot be resolved 正确改法 select row_number()over(partition by c1 order by rn)rn2 from(select c1,row_number()over(partition by c1 order by c1)rn ...
表分区
这可以非常快地删除数百万行记录，因为它不需要逐个删除每个记录。不过要注意上面的命令需要在父表上拿到 ACCESS EXCLUSIVE 锁。另一种通常更好的选项是把分区从分区表中移除，但是保留它作为一个独立的表：ALTER TABLE measurement DETACH...
配置弹性伸缩（仅Hadoop集群类型）
开启抢占实例补偿后，在竞价实例被回收前5分钟左右，将主动替换掉当前竞价实例。当您不指定 组内最小按量节点数量、按量节点所占比例 和 最低价的多个实例规格 参数时，您创建的是普通成本优化伸缩组。否则，您创建的是成本优化混合实例...
PolarDB并行查询
串行优化流程中做针对并行执行的补强，例如修正table扫描方式等，这也是上面性能数据中Q6/Q12会有超线性加速比的原因。全算子统计信息推导+代价计算，补充了一系列的cost formula和cardinality estimation推导机制。自适应执行策略 在早期...
数据问答干预
反问顺序：可以根据实际需要对参与问答的列设置反问次序，当用户问法涉及到反问时将依据设定的顺序进行反问。说明 对于数组和范围类型的列不会参与反问。环境参数配置 作用：本功能用于开发者通过API透传约束信息给机器人，比如：业务中有A...
RPC 常见问题
如果客户端或者服务端与 9600 端口的连接断开，则需要重启应用恢复，并进一步排查端口异常断开的原因。检查 RPC 服务端地址绑定。登录 RPC 服务端，运行以下命令：ps-ef|grep java 查看进程启动参数 rpc_bind_network_interface 或 rpc_...
常见问题
为什么我的Worker节点挂掉了？如何查看Trino日志？为什么查询不到数据或查询失败？为什么查询Hudi或Delta表时列的顺序错了？为什么新增一个配置后，重启Trino失败？为什么使用Hive连接器查询Iceberg、Hudi或Delta Lake表时会报错Cannot ...
DescribeScalingGroupDetail-查询指定伸缩组详情
查看指定伸缩组的基本...开启后，当收到抢占式实例将被回收的系统消息时，伸缩组将尝试创建新的实例，替换掉将被回收的抢占式实例。true LaunchTemplateVersion string 实例启动模板的版本。Default RegionId string 伸缩组所属的地域 ID。...
DescribeScalingGroups-查询伸缩组列表
开启后，当收到抢占式实例将被回收的系统消息时，伸缩组将尝试创建新的实例，替换掉将被回收的抢占式实例。true LaunchTemplateVersion string 伸缩组使用的实例启动模板的版本。Default RegionId string 伸缩组所属的地域的 ID。...
在DTS迁移或同步任务中配置ETL
本文介绍在DTS链路内配置ETL的操作步骤及相关语法信息，帮助您在数据过滤、数据脱敏、记录数据修改时间和数据变更审计等场景下使用ETL功能。背景信息 DTS是一个数据迁移和同步服务，通常用于数据搬迁或实时数据传输。但有时候用户有数据...
排查伸缩活动异常
执行伸缩活动时，可能会因某些原因导致伸缩活动异常无法继续进行。本文汇总了常见的控制台伸缩活动异常信息，并给出可能原因和解决建议，帮助您快速排查伸缩活动异常问题。伸缩活动异常说明 伸缩活动的可能状态有拒绝、执行中、成功、警告...
常见问题
A：只读节点间负载不均衡的原因有只读节点连接数较少、自定义集群地址分配时未包括某个只读节点等。Q：造成主节点负载高或低的原因是什么？A：造成主节点（主库）负载高的原因有直连主地址、主库接受读请求、存在大量的事务请求、主从复制...
SaaS应用对接
因此，为了兼容单租户模式的独立托管部署和这类多租户的SaaS系统，平台抽象了与这类SaaS系统的交互行为，应用为满足这个交互行为，需要完成本文所提的对接要求。整体链路 功能边界 租户管理 IoT平台管理阿里云租户与应用内租户的映射关系...
- 产品推荐
- 这些文档可能帮助您