确定需求
您需要了解真实的业务需求是什么，以及确定整个业务系统能解决什么问题。业务调研 充分的业务调研和需求分析是数据仓库建设的基石，直接决定数据仓库能否建设成功。在数仓建设项目启动前，您需要请相关的业务人员介绍具体的业务，以便明确...
消费-通过消费组实现高可靠消费
这篇文章主要介绍在实时计算场景中，如何能做到日志处理保序、不丢失、不重复，并且在上下游业务系统不可靠（存在故障）、业务流量剧烈波动情况下，如何保持这三点。为方便理解，本文使用《银行的一天》作为例子将概念解释清楚。在文档末尾...
版本发布说明
修复 create table with gsi 部分情况下执行失败且无法自动回滚的问题。修复部分DAL指令在高并发下存在并发安全风险的问题。修复部分场景下执行器没有选择走xplan的问题。修复使用xplan访问带生成列的表导致crash的问题。修复已建AUTO数据...
确定需求
建议您思考下列问题，对后续的数据建模将有巨大的帮助：业务数据是根据什么（维度、粒度）汇总的，衡量标准是什么？例如，成交量是维度，订单数是成交量的度量。明细数据层和汇总数据层应该如何设计？公共维度层该如何设计？是否有公共的...
确定需求
建议您思考下列问题，对后续的数据建模将有巨大的帮助：业务数据是根据什么（维度、粒度）汇总的，衡量标准是什么？例如，成交量是维度，订单数是成交量的度量。明细数据层和汇总数据层应该如何设计？公共维度层该如何设计？是否有公共的...
错误代码
本文档列出了 PolarDB-X 1.0 返回的常见错误码及解决方法。TDDL-4006 ERR_TABLE_NOT_EXIST 数据表不存在。示例：ERR-CODE:[TDDL-4006][ERR_TABLE_NOT_EXIST]Table '*' doesn't exist.该错误表示 PolarDB-X 1.0 数据表不存在，或者由于未知...
离线同步常见问题
文档概述 问题分类 相关文档 离线同步任务运维常见问题 为什么数据源测试连通性成功，但是离线同步任务执行失败？如何切换数据集成任务执行资源组？脏数据如何排查和定位？如何查看脏数据？如果离线同步传输数据时，脏数据超出限制，是否...
功能发布记录
支持 RMS-Lite 轻量化服务 在云原生场景下提供云原生化的 RMS，提高 RMS 在云原生社区的技术影响力。轻量化默认增加扩展维度列，根据资源类型添加，并支持取消。新告警管理能力增强 页面支持按数据源名称搜索规则。平台告警信息通过 ...
测试分析及调优
接着看关键指标是否满足要求，如果不满足，需要确定是哪个地方有问题，一般情况下，服务器端问题可能性比较大，也有可能是客户端问题（这种情况非常小）。对于服务器端问题，需要定位的是硬件相关指标，例如CPU，Memory，Disk I/O，Network...
小文件优化及作业诊断常见问题
问题类别 常见问题 小文件优化 MaxCompute什么情况下会产生小文件？如何解决小文件问题？作业诊断 执行并发插入操作报错，如何处理？运行作业时，报错ODPS-0130121，如何解决？创建的Shell任务执行失败，在ECS服务器执行显示成功，运维中心...
数据湖管理FAQ
Lakehouse相关问题 什么是Lakehouse？Lakehouse数据入湖时，对线上RDS有压力吗？如何控制建仓的限流能力？Lakehouse工作负载为什么运行失败，又没有S park Log 日志可以看？元数据发现相关问题 为什么配置了元信息发现，并在“手动执行”...
8、如何做好迭代复盘？
同样，我们也梳理了迭代复盘会需要相关同学做准备的事项（如下表），供大家参考：活动名称 迭代复盘会 活动目标 从整体上了解团队的研发效能情况，及时发现研发过程的问题，通过问题分解和深入分析，找出问题根因和改进点，从而驱动团队的...
消息发送重试和流控机制
消息流控 云消息队列 RocketMQ 版 的流控机制主要为您解答如下问题：系统在什么情况下会触发流控？触发流控时客户端行为是什么？应该如何避免触发流控，以及如何应对突发流控？消息发送重试机制 重试基本概念 云消息队列 RocketMQ 版 客户...
挂载访问FAQ
什么情况会引发网络切换或者后端服务的HA倒换？为什么需要重新挂载？还有没有其他的方案？访问文件 如何排查ECS安全组配置？如何排查NAS权限组规则？极速型NAS自动生成的安全组策略能改吗？为什么云安全产品会对极速型NAS安全组告警高危...
计费FAQ
实例计费问题 节省计划问题 什么是节省计划？节省计划有什么特点？节省计划的每小时承诺消费是什么？当能抵扣的实例台数不是整数时，节省计划如何工作？节省计划有哪些类型？节省计划支持哪些付费方式？哪里可以看到节省计划的推荐和购买...
离线同步并发和限流之间的关系
在一些数据同步场景，脏数据的出现会导致任务同步效率下降，以关系数据库写出为例，默认是执行batch批量写出模式，在遇到脏数据时会退化为单条写出模式（以找出batch批次数据具体哪一条是脏数据，保障正常数据正常写出），但单条写出效率会...
常见问题
Q：什么情况下会导致复制延迟增大？A：出现如下情况时会导致复制延迟增大：主节点写入负载高，产生了过多的Redo日志，导致只读节点来不及应用。只读节点负载过高，抢占了过多原本属于应用Redo日志的资源。I/O出现瓶颈，导致读写Redo日志过...
数据投递
源库、目标库出现其他问题后的重试时间 在同步任务启动后，若源库或目标库出现非连接性的其他问题（如DDL或DML执行异常），则DTS会报错并会立即进行持续的重试操作，默认持续重试时间为10分钟，您也可以在取值范围（1~1440分钟）内自定义重...
在线教育最佳实践
背景信息 随着在线教育市场规模不断扩大，呈现出流量大、用户分布广、直播教学等特点。低时延性、强交互性、稳定流畅是保障优质教学服务的前提。全业务API调用、数据的上传与下载和自研信令控制体系等，均是提升在线教育用户体验的重要环节...
常见问题
Q：什么情况下会导致复制延迟增大？A：出现如下情况时会导致复制延迟增大：主节点写入负载高，产生了过多的Redo日志，导致只读节点来不及应用。只读节点负载过高，抢占了过多原本属于应用Redo日志的资源。I/O出现瓶颈，导致读写Redo日志过...
阿里云Elasticsearch实例FAQ
本文列举了阿里云Elasticsearch（ES）相关的常见问题，包括购买、退订、配置、访问、查询、写入、插件、分词、日志、重启、负载或状态异常、备份与恢复、监控报警等相关问题。常见问题概览 购买或退订实例问题 购买ES实例时选错配置，如何...
常见问题
Q：什么情况下会导致复制延迟增大？A：出现如下情况时会导致复制延迟增大：主节点写入负载高，产生了过多的Redo日志，导致只读节点来不及应用。只读节点负载过高，抢占了过多原本属于应用Redo日志的资源。I/O出现瓶颈，导致读写Redo日志过...
实例FAQ
费用类常见问题解决方案 企业级实例问题 什么是企业级实例？什么是共享型实例？企业级实例与共享型实例有什么本质区别？哪些是企业级实例？哪些是共享型实例？在什么业务场景下，我需要购买企业级实例？企业级实例的网络性能怎么样？企业级...
测试与验证
功能测试及联调测试 在应用上云割接前，需要进行充分的功能测试与联调测试，验证云上环境应用运行情况。功能测试及联调测试依赖企业自己的测试团队及流程工作，不作过多描述，仅在此建议，对应用功能点进行分级，优先测试验证核心功能点，...
常见问题
ossfs偶尔出现断开的情况 问题分析：开启ossfs的debug日志，加上-d-o f2 参数，ossfs会把日志写入到系统/var/log/message。分析日志，发现ossfs在listbucket、listobject申请内存过多，触发了系统的oom。说明 listobject是发起HTTP请求到...
RDS MySQL只读实例同步延迟原因与处理
常见问题 Q：为什么我的实例中，部分只读实例有1秒延迟的现象？A：每个实例的采集程序、启动时间都不一样，有的实例的采集刻凑巧在刚过整秒的时间点，就会有此现象。其他实例的采集时刻不在刚过整秒的时间点，就不会有这个现象。详情请参见...
RDS MySQL只读实例同步延迟原因与处理
常见问题 Q：为什么我的实例中，部分只读实例有1秒延迟的现象？A：每个实例的采集程序、启动时间都不一样，有的实例的采集刻凑巧在刚过整秒的时间点，就会有此现象。其他实例的采集时刻不在刚过整秒的时间点，就不会有这个现象。详情请参见...
如何将一棵LSM-Tree塞进NVM
每个对象对应一个8字节的索引，每个索引的最高位用于标记该对象的持久化情况以确保原子化的对象分配与释放。Freelist提供四个接口用于完成一个对象的分配与释放。Get用于从freelist中获取一个对象。Commit用于通知Halloc该对象已完成初始化...
PolarDB-X 1.0同步至PolarDB-X 2.0
源库、目标库出现其他问题后的重试时间 在同步任务启动后，若源库或目标库出现非连接性的其他问题（如DDL或DML执行异常），则DTS会报错并会立即进行持续的重试操作，默认持续重试时间为10分钟，您也可以在取值范围（1~1440分钟）内自定义重...
RDS MySQL Serverless实例
常见问题 为什么实例没有自动停止？如何查看实例的当前连接数？自动启停功能默认关闭，需要手动开启。如果已开启，您可以查看实例的连接数。查看连接数：在实例详情页左侧，选择 监控与报警，查看 会话连接 指标。查看有哪些连接：执行 ...
PolarDB-X 1.0同步至Elasticsearch
源库、目标库出现其他问题后的重试时间 在同步任务启动后，若源库或目标库出现非连接性的其他问题（如DDL或DML执行异常），则DTS会报错并会立即进行持续的重试操作，默认持续重试时间为10分钟，您也可以在取值范围（1~1440分钟）内自定义重...
流量控制与配额管理
保护用户资产 错误甚至恶意的 OpenAPI 调用，可能会在短时间内创建出大量不符合用户期望的云资源，流量控制可对此类情况进行识别并直接拒绝请求，并支持异常告警，保护用户资产不受损失。查看流控信息 在接口文档页面，会说明该接口的 流控...
Alibaba Cloud Linux 3镜像发布记录
支持HT-aware-quota特性（自研）基于cfs带宽控制和core scheduling的算力稳定方案，在混合部署场景下，通过感知ht对端是否空闲来校准quota，使任务在每个调度周期内都能够得到相对稳定的算力，适用于计算密集型任务。支持group identity 2....
Blink和Flink常见问题及诊断
本文为您介绍使用Hologres过程中关于Blink和Flink的常见问题。基本概念 Hologres性能 写入性能 列存表：InsertOrIgnore>InsertOrReplace>InsertOrUpdate 行存表：InsertOrReplcae=InsertOrUpdate>InsertOrIgnore 参数 说明 InsertOrIgnore ...
缓存相关常见问题
本文为您介绍CDN缓存相关的常见问题。CDN缓存清理机制是什么？CDN默认的缓存规则是什么？如何判断CDN缓存是否成功？如何解决URL的传递参数为变量导致CDN缓存命中率低的问题？如何设置文件不缓存直接回源？在CDN控制台缓存过期时间设置为0，...
基本概念
本文列出了 SOFAStack 涉及的基本概念，以便于您更好地理解产品。A|B|C|D|F|G|H|I|J|K|L|M|O|P|Q|R|S|T|W|X|Y|Z A AKE 容器引擎（Ant Financial Kubernetes Engine，AKE）是将底层物理资源按照计算、网络、存储等进行切分和抽象的容器引擎...
HDFS Balancer
HDFS Balancer工具可以用来分析块的分布情况，并且可以重新分配DataNode中的数据。本文通过为您介绍如何使用HDFS Balancer工具以及Balancer的主要调优参数。使用HDFS Balancer 方式一：使用HDFS Balancer命令 HDFS Balancer命令语句如下。...
Dataphin集成任务报错Failed XXX actions:...
产品名称 Dataphin 产品模块 数据集成 概述 本文为您介绍HBase数据库中Failed XXX actions:RegionTooBusyException:XXX times的错误原因，以及如何规避 问题描述 您配置的集成任务是从FTP到HBase，为什么在执行过程中会报写入hbase时发生IO...
点播CDN常见问题
本文为您介绍视频点播CDN相关常见问题。问题分类 购买和计费 如何查看新购买的加速资源包（视频点播流量包）？为什么监控查询流量、用量查询流量与日志统计流量有差异？源站不在中国内地，使用中国内地CDN节点加速如何收费？购买视频点播...
模式匹配
一些例子，使用#"定界返回串：substring('foobar' from '%"o_b#"%' for '#')oob substring('foobar' from '#"o_b#"%' for '#')NULL POSIX正则表达式 正则表达式匹配操作符表列出了所有可用于 POSIX 正则表达式模式匹配的操作符。...
- 产品推荐
- 这些文档可能帮助您