行业模型模版
DataWorks智能数据建模联合具备丰富行业建模经验的数据架构师，总结阿里云百万用户最全面的业务场景，结合阿里巴巴技术创新能力，提供零售电子商务、金融、制造等多个领域的行业模型最佳实践。您可使用该模版快速构建属于您的数据仓库。...
构建运营模型
其中的成员包括：架构师和专业技术人员，负责上云架构设计和业务上云迁移工作；安全、合规等领域专家，负责设计企业IT治理方案、预估风险和制定治理规则；财务专家，负责制定财务的管理流程和成本分摊规则。云管理团队：在企业业务全面上云...
序言
围绕着业务价值作 IT 架构交付，绝不只是看哪种技术比较时髦或功能强大，这背后的选型元素涵盖了服务化架构、敏捷交付、API 平台开放、综合成本等话题，也包含着落地可行性和生态成熟度等方面，因此更需要关注这套技术产品的长期愿景和发展...
如何对JSON类型进行高效分析
PolarDB 列存索引（In Memory Column Index，IMCI）功能推出了完备的虚拟列与列式JSON功能等，可以快速处理大数据和多种数据类型（包括结构化数据与半结构化数据等），并提供高效的数据分析、查询与流计算能力，适用于数据分析、数据仓库与...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
性能监控最佳实践
但是，绝大部分线上问题无法仅通过链路追踪的基础能力就能够有效定位并解决，线上系统的复杂性决定了一款优秀的 Trace 产品必须提供更加全面、有效的数据诊断能力，比如代码级诊断、内存分析、线程池分析、无损统计等等。充分利用不同语言...
大数据安全治理的难点
使用大数据系统的常见人员包括开发、运营、分析师，甚至销售及HR都会来查询自己所需的数据。如此多类型的用户，授权、管理难度加大，什么样的人员需要授予什么样的权限？如果他们离职、换部门了怎么办？这其中很有可能出现 权限蠕变、过度...
南京银行
解决方案 2017 年，南京银行引入蚂蚁集团金融级分布式交易架构能力——分布式架构 SOFAStack、分布式数据库 OceanBase，以及大数据平台能力，构建新的互联网金融核心，并于同年 11 月上线互联网金融平台“鑫云+”。客户价值 新平台开创“1+...
数据分析整体趋势
市场趋势 数据规模高速增长（全球2010-2025年复合增长达到27%，中国则大于30%）带来了强劲的数据分析需求。据Gartner统计，到2025年实时数据占比达30%，其中非结构数据占比达80%，同时数据存储云上规模达45%，而云上数据库规模可达75%。从...
全场景解决方案
平滑迁移异构治理 方案架构 双模微服务平台通过 SOFA 微服务和 Service Mesh 微服务，提供了既支持 SOFA 框架又支持 Service Mesh 架构的微服务管理和治理能力,解决用户在技术转型期间与未改造的遗留系统相互之间的打通和过渡问题，帮助...
快速入门
作为学院派关系型数据库管理系统的鼻祖，它的优点主要集中在对SQL规范的完整实现以及丰富多样的数据类型支持，包括JSON数据、IP数据和几何数据等，而大部分商业数据库都不支持这些数据类型。除了完美支持事务、子查询、多版本控制（MVCC）...
捷顺
DAS服务自动SQL限流和自动SQL调优，帮助DBA从救火员转向数据库架构师，有更多时间和精力帮助研发优化系统架构，审核数据库的变更和各种操作，进一步降低系统故障的概率。DAS服务自动对数据库实例进行治理，帮助捷顺科技把数据库的运维成本...
从Oracle迁移应用至阿里云PolarDB全流程指南
您可以使用数据传输轻松构建安全、可扩展、高可用的数据架构。云数据库PolarDB：PolarDB是阿里巴巴自主研发的下一代关系型分布式云原生数据库，目前兼容三种数据库引擎：MySQL、PostgreSQL、高度兼容Oracle语法。计算能力最高可扩展至1000...
专有云通用架构
集群规模大于50台物理机时可采用Apsara Stack Enterprise专有云，集群规模大于50台物理机，适合银行、证券等大型金融机构自建专有云，建议使用下图所示的架构，部署包括：虚拟化VM、数据库、存储、中间件、大数据等金融云产品。Apsara ...
概述
数据域的设定建议由统一组织或者人员（如数据架构师或者模型小组成员）进行管理和设定，数据域设计人员需要能对企业有深刻的业务理解，更多的表达对业务的解释和抽象。使用DataWorks进行数据域的规划建设的操作，请参见 数据域。业务过程 ...
发现并处理大Key和热Key
说明 读写分离架构同样存在缺点，在请求量极大的场景下，读写分离架构会产生不可避免的延迟，此时会有读取到脏数据的问题。因此，在读、写压力都较大且对数据一致性要求很高的场景下，读写分离架构并不是最优方案。使用阿里云Tair的...
整体架构
湖仓版（3.0）架构如下：数据源 数据管道APS可以一键低成本接入数据库、日志、大数据中的数据。存储层+计算层 支持自研引擎，羲和计算引擎和玄武存储引擎。新增集成的开源引擎，Spark计算引擎和Hudi存储引擎。可以借助开源的能力为您提供更...
Doris概述
并且这两类进程通过一致性协议来保证服务的高可用和数据的高可靠，这种高度集成的架构设计极大的降低了一款分布式系统的运维成本。从以下五个方面介绍Doris技术：在使用接口方面，Doris采用MySQL协议，高度兼容MySQL语法，支持标准SQL，您...
客户案例
业务挑战 一致性，一致性是金融业务的生命线，为了应对硬件或者系统故障（IDC/OS/机器故障），传统的数据库在这方面为业务提供多种选择。最大可用模式在主库故障情况下可能造成数据丢失。最大保护模式会提高全年的不可用时间，并造成性能...
典型客户案例
传统架构在联机并发、在线存储、批量处理方面的扩展性都面临极大的挑战：一方面单体架构扩展成本高、响应慢，另一方面事务的 ACID 过度依赖数据库，导致数据库成为扩展瓶颈。另外，银行基础产品在与 C 端，B 端以及同业等多种场景融合时，...
列存索引技术架构介绍
MySQL架构在AP场景的缺陷 MySQL架构在执行复杂查询时性能差有多个方面的原因。对比专用的OLAP系统，其性能瓶颈体现在以下方面：MySQL的SQL执行引擎基于流式迭代器模型（Volcano Iterator）实现。该架构在工程实现上依赖大量深层次的嵌套...
管理数据架构待发布对象
② 数据架构对象列表 数据架构对象列表为您展示当前待发布的数据架构对象及支持的操作。数据架构对象信息：包括对象ID、发布状态/完成时间、对象类型、变更、最近提交人/时间、环境变更。操作：支持查看数据架构对象的版本信息及发布该对象...
管理数据架构待发布对象
② 数据架构对象列表 数据架构对象列表为您展示当前待发布的数据架构对象及支持的操作。数据架构对象信息：包括对象ID、发布状态/完成时间、对象类型、变更、最近提交人/时间、环境变更。操作：支持查看数据架构对象的版本信息及发布该对象...
资源使用优化
随着时间的推移，初始写入的，被认为是“热”的数据，访问频次逐渐下降，当每周只被访问几次的时候，就会转换为“温”的数据。在此后，3~6个月里面，当数据一次都未被访问，或者访问频率降低到一个月几次或者几个月一次，它就可能被定义为...
高压缩引擎（X-Engine）介绍
挑战和诉求：历史数据归档 历史数据归档的挑战 大部分业务数据的读写特征，都是最新产生的数据会被更频繁地读取或更新，而更久之前的数据（如1年前的聊天记录或订单信息）很少被访问。随着业务发展，数据库系统中会积累大量访问频率很低...
数据源管理概述
功能介绍 多数据源类型接入：Dataphin内置丰富的数据源类型，支持对接的数据源包括大数据存储型数据源、文件型数据源、消息队列型数据源、关系型数据源和NoSQL数据源。更多信息，请参见 Dataphin支持的数据源。自定义数据源类型：在内置的...
关键技术竞争力
混合云异地多活：单元化架构解决容灾容量问题 SOFAStack 以云原生为载体输出蚂蚁多年沉淀的金融级单元化架构，包括敏捷研发、分布式架构、发布运维、监控分析、容灾应急等方面的能力，支持多个关键场景（同城双活/两地三中心/异地多活/异构...
行业趋势与背景
数据库系统是一切应用软件的数据处理及交换核心，是所有基础软件进行数据存储、查询、分析处理的中心。数据库系统运行性能是否高效稳定、接口语言是否通用，直接决定了上层应用能否给用户提供好的性能，同时直接影响开发人员效率。根据全球...
概述
架构特点 云原生架构（存储和计算分离，低成本）PolarDB-X 列存索引，采用云原生对象存储OSS作为主要数据存储（成本仅为本地盘的1/6~1/10），同时结合列存数据本身的高压缩性（3~5倍），可以提供非常有竞争力的低成本优势。在HTAP行列混存...
如何基于LSM-tree架构实现一写多读
LSM-tree数据库引擎 LSM-Tree全称是Log Structured Merge Tree，是一种分层、有序，面向磁盘设计的数据结构，其核心思想是利用磁盘批量的顺序写要比随机写性能高的特点，将所有更新操作都转化为追加写方式，提升写入吞吐。LSM-tree类的存储...
用云成本需求分析
捕获成本需求 企业级客户主要从以下几个方面获取用云成本需求：业务地域性 合规性 安全性 业务连续性和稳定性 技术团队管理 自动化和标准化 成本优化目标 分析成本需求 业务地域性 选择云地域，在全球跨国企业的客户上云过程中，选择一个...
什么是EMR Serverless StarRocks
数据湖分析 StarRocks不仅能高效的分析本地存储的数据，也可以作为计算引擎直接分析数据湖中的数据，支持Apache Hive、Apache Iceberg、Apache Hudi等数据组织结构；支持Parquet、ORC、CSV等文件格式；也支持HDFS、S3、OSS等存储方式。在...
解决方案与客户案例
本文介绍了异地多活解决方案的架构和应用场景，以及国税总局和联通新客服系统案例的实现架构和效果。异地多活数据库解决方案 方案背景 随着云计算的蓬勃发展，越来越多的信息系统选择部署在云计算环境下，因此基于云产品为信息系统的服务...
解决方案与客户案例
异地多活场景下的数据库方案 方案背景 随着云计算的蓬勃发展，越来越多信息系统选择部署在云计算环境下，因此基于云产品为信息系统的服务能力和数据质量提供保障尤为重要。为了防止灾难性的故障如火灾、洪水、地震、区域电力中断或者人为...
设计方案
基于稳定性支柱设计原则，整体稳定性设计方案可参考如下：架构设计原则 软件系统从所有的功能都在一个应用程序内运行的单体应用架构，到不同的功能模块分别部署在不同的服务器上的传统分布式应用架构，再到服务细分通过轻量级的通信机制...
附录：SOFAStack 产品目录
SOFAStack 源于自蚂蚁内部沉淀十多年的金融级分布式中间件技术体系，吸收了支付宝自创立以来在关键金融交易系统锤炼出来的架构实践。SOFAStack 所有的产品技术均经过蚂蚁集团自身严苛的金融场景验证，为金融交易技术保证风险安全的同时，...
PolarDB PostgreSQL版架构介绍
本文通过以下几个方面介绍 PolarDB PostgreSQL版（兼容Oracle）的架构：传统数据库的问题 PolarDB PostgreSQL版（兼容Oracle）云原生数据库的优势 PolarDB PostgreSQL版（兼容Oracle）整体架构概述 存储计算分离架构概述 HTAP架构概述 ...
PolarDB PostgreSQL版架构介绍
本文通过以下几个方面介绍 PolarDB PostgreSQL版 的架构：传统数据库的问题 PolarDB PostgreSQL版云原生数据库的优势 PolarDB PostgreSQL版整体架构概述 存储计算分离架构概述 HTAP架构概述 PolarDB PostgreSQL版：存储计算分离架构详解 ...
资源管理
阿里云资源管理服务是一系列企业IT治理产品和服务的集合，主要包括资源目录、资源组、资源共享和标签。您可以使用资源目录在云上构建企业业务组织关系，使用资源组和标签分层次管理云上资源，使用资源共享在企业成员之间共享云上资源。结合...
监控和分析
权限管理：权限管理对于业务来说是非常重要的，不同的角色有不同的权限，对每个用户分配最小够用权限，能极大的防止各种越权操作，从而有效减少由于操作不当带来的故障和安全问题。配置审计：当使用大规模资源时，需要监管资源配置的合规性...
- 产品推荐
- 这些文档可能帮助您