E-MapReduce支持倚天云服务器
大数据场景下倚天架构与X86架构对比 在相同规格下X86架构的ECS实例和基于倚天架构的ECS实例上进行了基准测试，可以看到在大数据业务场景下倚天架构实例比基于x86架构实例算力性价比更高。降低硬件成本 相比于X86架构ECS实例成本，倚天架构...
产品架构
智能媒体管理围绕海量数据、端云拉通、标准统一、智能分析、场景结合、一键处理六个关键点采用分层架构进行设计，分层架构包含处理引擎、元数据管理、场景化封装三层。智能媒体管理采用分层架构进行设计，分层架构包含处理引擎、元数据管理...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
附录：SOFAStack 产品目录
SOFAStack 源于自蚂蚁内部沉淀十多年的金融级分布式中间件技术体系，吸收了支付宝自创立以来在关键金融交易系统锤炼出来的架构实践。SOFAStack 所有的产品技术均经过蚂蚁集团自身严苛的金融场景验证，为金融交易技术保证风险安全的同时，...
Presto概述
应用场景 Presto是定位在数据仓库和数据分析业务的分布式SQL引擎，适合以下应用场景：ETL Ad-Hoc查询 海量结构化数据或半结构化数据分析 海量多维数据聚合或报表分析 重要 Presto是一个数仓类产品，因为其对事务支持有限，所以不适合在线...
Trino概述
应用场景 Trino是定位在数据仓库和数据分析业务的分布式SQL引擎，适合以下应用场景：ETL Ad-Hoc查询 海量结构化数据或半结构化数据分析 海量多维数据聚合或报表分析 重要 Trino是一个数仓类产品，因为其对事务支持有限，所以不适合在线业务...
PolarDB Serverless实现了哪些突破
在国际数据库顶级会议2021 ACM SIGMOD上，一篇标题为《PolarDB Serverless:A Cloud Native Database for Disaggregated Data Centers》的论文，介绍了阿里云自研数据库 PolarDB 基于计算存储分离，实现的最新Serverless技术架构研究进展。...
应用安全
云防火墙通过检测网络流量识别恶意攻击行为，包含互联网边界防火墙、VPC边界防火墙、主机边界防火墙，三者配合使用可统一监控数据访问行为，精细化管理互联网、VPC、主机间的访问控制策略，形成互联网边界-虚拟网络边界-主机边界三层纵深...
步骤三：开发单元化应用
在单元化架构中，您需要对本地应用进行开发改造，完成单元化功能配置。本文将基于转账、积分等场景分别介绍微服务（MS）中的 SOFARPC、消息队列（MQ）以及分布式事务（DTX）如何完成 LDC 单元化相关的业务开发。前提条件 路由参数为 userId...
减灾与应急时空解决方案与案例
完全架构于云上，总体采用数据存储层、业务服务层和应用层三层架构。底层采用云原生数据库 PolarDB PostgreSQL版（兼容Oracle）+Ganos时空数据库引擎形成坚实底座，中间层采用GeoServer进行空间数据服务发布。支持直接导入面向对象存储OSS...
整体架构
在这三层架构之上，通过服务秒级恢复，支持跨可用区部署，自动故障检测、摘除和副本重搭。配合三副本存储、全量和增量备份，提供金融级别的数据可靠性。在周边生态上，提供数据迁移、数据同步、数据管理、数据集成、数据安全等配套工具，...
EventHandle
好了，可以看到，由于 client 是全局变量，此时用户每访问一次网站首页，都会给 client._events.error 对应的数组增加一个 error 处理函数，虽然每个 error 处理函数 26KB 左右，但是流量上来后，很容易累积触发 OOM。解决问题 理解内存...
典型客户案例
实现从应用到数据的分布式多活架构 四川农信建成的下一代 IT 架构，要对标行业内的先进实践，并保证架构的持续迭代和进化能力，目前来看，需要实现“两地三中心异地多活”，多活机制覆盖从接入层、应用层到数据层，在接入层建立相应的流量...
Control Center基本使用
1.架构图 下图分别为传统的流处理应用架构和基于ksqlDB的应用架构示例。通过对比不难看出，流处理引擎以及连接器部分均从之前的独立角色集成到了ksqlDB。除此之外，ksqlDB还通过物化视图提供了流处理过程中的查询功能。传统的流处理应用...
什么是媒体处理
产品架构 架构图 架构说明 媒体处理MPS基于阿里云云计算服务构建，改变了以往进行转码时需要购买、搭建、管理转码软硬件的高昂投入以及配置优化、转码参数适配等复杂性问题，借助云计算服务的弹性伸缩特性，可以按需提供转码能力，从而最大...
错误处理
break except LogException as e:if e.get_error_code()="RequestError":if i+1=maxRetries:print("error code:"+e.get_error_code())print("error message:"+e.get_error_message())break else:print("request error happens,retry it!...
产品架构
数据管理DMS的产品架构分为三层：数据源、数据运营与管理和商业应用。数据源 关系型数据库：MySQL、SQL Server、PostgreSQL、PolarDB MySQL版、PolarDB PostgreSQL版（兼容Oracle）、PolarDB分布式版、OceanBase、Oracle、达梦DamengDB等。...
错误码
第三阶段错误 CSB处理消费端发出的HSF请求，在访问后端服务提供者时，HSF服务提供应用出错，因为HSF框架不支持返回具体应用逻辑错误信息，仅仅报错为 80 server error，CSB以HSF错误 99[800][80]server error 回复消费端。这里具体的应用...
错误处理
SDK可能出现的异常包括如下几类：由服务端返回的错误或者SDK向服务端发出请求时网络错误（例如网络连接不通、服务端返回超时等）该类错误由SDK处理并包装在统一的异常类抛出给用户处理。关于此类错误的更多信息请参见通用错误码和各个API...
自定义 Filter
SOFARPC 对请求与响应的过滤链（FilterChain）处理方式为：通过多个过滤器 Filter 来进行具体的拦截处理。允许用户自定义 Filter 扩展，且自定义 Filter 的执行顺序在内置 Filter 之后。下文将就自定义 Filter 类及其生效进行说明：自定义 ...
解析Java报错日志
SELECT error_message,COUNT(error_message)as ct_msg,method WHERE method LIKE 'PutLogs' GROUP BY error_message,method 统计各个错误码出现的错误次数。SELECT error_code,COUNT(error_code)as count_code GROUP BY error_code 设置报...
配置钉钉机器人接收X-Pack Watcher报警
步骤四：查看报警结果 正常情况下，当集群中的数据达到 步骤三：配置Watcher报警 中配置的报警条件时，您可以在钉钉群中收到类似 error 日志出现了，请尽快处理 的报警信息。说明 如果您不再需要执行报警任务，可执行以下命令删除该报警...
版本管理
PolarDB 集群架构共三层：数据库代理Proxy、数据库内核引擎DB和数据库分布式存储Store。您可以根据实际情况单独升级Proxy或内核引擎，也可以绑定一起升级。注意事项 版本升级一般不超过30分钟，升级过程中会重启数据库代理Proxy或内核引擎...
全场景解决方案
平滑迁移异构治理 方案架构 双模微服务平台通过 SOFA 微服务和 Service Mesh 微服务，提供了既支持 SOFA 框架又支持 Service Mesh 架构的微服务管理和治理能力,解决用户在技术转型期间与未改造的遗留系统相互之间的打通和过渡问题，帮助...
自定义 Router
SOFARPC 中对服务地址的选择也抽象为了一条处理链，由每一个 Router 进行处理。同 Filter 一样，SOFARPC 对 Router 提供了同样的扩展能力。本文介绍如何自定义 Router 类。自定义 Router 类的流程如下：实现自定义 Router 类 自定义 Router...
故障基础数据管理
服务组与故障业务线的关系：一个服务组对应故障中一个角色，但可以服务多条故障业务线 服务组与工单问题分类的关系：一个服务组可以服务工单多个问题分类 服务组与组织架构的关系：一个服务组可以服务多个组织架构，一个组织架构可以拆分为...
什么是边界路由器
阿里云基于软件自定义网络SDN（Software Defined Network）架构下的三层Overlay技术和交换机虚拟化技术，将物理专线的接入端口隔离起来，并抽象成边界路由器VBR（Virtual border router）。VBR是CPE（Customer-premises equipment）设备和...
事件管理
事件是指任何可能中断或降低服务质量（或具有此类威胁）的计划外事件。例如业务出现风险、服务器运行缓慢、接口响应延时过...通过这些信息的汇聚，可在后期统一进行分析查看，协助后续类似事件发生的处理以及对系统架构的优化提供可靠依据。
架构模块介绍
工程架构 SOFARPC 架构如下所示：SOFARPC 从下到上分为两层：核心层：包含了 RPC 的核心组件（例如各种接口、API、公共包）以及一些通用的实现（例如随机等负载均衡算法）。功能实现层：所有的功能实现层的用户都是平等的，都是基于扩展...
集群架构
云原生内存数据库Tair 提供双副本集群架构实例，可轻松突破Redis自身单线程瓶颈，满足大容量、高性能的业务需求。集群架构支持代理和直连两种连接模式，您可以根据本章节的说明，选择适合业务需求的连接模式。注意事项 云原生 版集群架构不...
持续架构优化
微服务架构下，业务通常采用流量网关+微服务网关的两层架构，前者负责南北向流量调度和安全防护，后者负责东西向流量调度和服务治理，MSE提供的云原生微服务网关,将两层网关变为一层。将流量网关（Kubernetes Ingress、Nginx）和微服务网关...
组件中心
您可以从控制台的左侧导航栏进入 组件中心 查看 SOFAStack 提供的所有研发运维类的功能组件，了解各组件的核心能力、核心优势、使用流程，以及依赖关系和支持的技术栈，根据业务需要选择开通合适的组件。中间件 分布式链路跟踪 一款实时...
C# SDK使用指南
{"requestId":"43A29C77-405E-4CC0-BC55-EE694AD0*","data":{"id":"docmind-20220712-b15f*"} } 调用结果查询类API 针对结果查询类API，查询结果有处理中、处理成功、处理失败三种情况。以下代码示例表示调用结果查询类API。var ...
故障演练
对于很多大型企业（如阿里巴巴）来说，经过多年的技术演进，系统工具和架构已经高度垂直化，服务器规模也达到了比较大的体量。当服务规模大于一定量（如10000台）时，小概率的硬件故障每天都会发生。这时如果需要人的干预，系统就无法可靠...
应用场景
使用分布式框架不是银弹，在解决了传统的单块架构系统随着业务需求的快速变化而面临的挑战后，分布式架构也为研发和运维增加了更大的复杂度和管理成本，基于分布式框架来进行架构改造的应用和业务通常会面临两大类挑战。首先是在出现问题时...
技术面临的挑战与革新
在Proxy的协同下，甚至可以做到节点切换对应用无感知 传统分布式架构与存储计算分离架构对比 分布式数据库其实已经有了不短的历史，早期的分布式数据库，在整体架构上可以分为share nothing和share disk两大类。share disk通过扩展底层的...
专线连接类
本文介绍物理专线连接的常见问题。...由于边界路由器硬件处理性能较慢，请等待上一个操作处理完成后，再添加或删除路由。添加路由条目时报错 token error，如何解决？由于浏览器的cookie超时造成报错，请退出登录后重新登录。
基础术语
域、应用、类标识三者唯一标识一个配置类实例。域 domain 配置类的一个命名空间，默认值为 Alipay，可通过编程注解修改。所属应用 application 配置类所属的应用名。类标识 class ID 代表配置类的一个字符串，跟应用代码中@DObject 注解的 ...
应用场景
表格存储 有互联网应用架构（包括数据库分层架构和分布式结构化数据存储架构）、数据湖架构和物联网架构三种典型应用架构。本文结合 表格存储 的典型应用架构介绍了不同应用架构下的应用场景。互联网应用 目前互联网已在日常生活中广泛应用...
- 产品推荐
- 这些文档可能帮助您