网络架构容灾
实现链路冗余大体可以分为以下几类：双专线冗余：通过两条专线与IDC/其它云互通，其中一条链路中断可以快速切换到另外一条线路，需要注意在进行专线接入的时候尽可能选择两个不同的专线接入点提升高可用。如果为了满足业务对延迟等需求，...
CDM公共维度层设计规范
数据记录数较大的维度表（例如商品表），可以适当冗余一些子集合，以减少下游扫描数据量：可以根据当天是否有行为，产出一个有活跃行为的相关维表，以减少应用的数据扫描量。可根据所属业务扫描数据范围大小的不同，进行适当子集合冗余。表...
查看集群日报与分析
Hive使用量分析 在Hive使用分析中，您可以获取以下图表：Hive库存储量使用量分布图 Hive用户总存储量分布 Hive表文件大小分布比例 Hive表热冷数据分布 Hive表存储格式分布 Hive详细信息 在Hive信息中会展示Hive库和Hive表的详细信息。...
CREATE INDEX
说明 索引表支持冗余列，冗余列可以帮助加速查询，避免回查主表。如果只是冗余某几个列可以使用Include。Include(c1,c2)表示冗余c1和c2列。默认表的索引构建方式是同步的，但是如果添加Async表示异步构建，需要执行BUILD INDEX命令。索引表...
分布键的选择策略
合理规划分布键，对表查询的性能至关重要，本文介绍分布键的选择策略。选择数据分布均匀的列或者多个列 若分布键数据分布不均匀，可能会导致数据倾斜。数据倾斜会导致部分计算节点存储的数据过多，查询负载大，查询耗时变长。因此请不要...
应用场景
分布式事务可应用在多个涉及数据库操作的领域，尤其在金融领域可以做到全场景的覆盖与落地验证，包括：支付与转账、账务：对于吞吐量有很高的要求 金融与理财：往往涉及的金额较大，所以对于产品的稳定性要求非常高 保险与监管报送：参与方...
公共规范
将出现大量空值和零值的统计汇总表，依据其空值和零值分布状况可以做适当的水平和垂直切分，以减少存储和下游的扫描数据量。空值处理原则 汇总类指标的空值：空值处理，填充为零，当前MaxCompute基于列存储的压缩技术不会由于填充大量空值...
表分布定义
选择表分布策略 AnalyticDB PostgreSQL 支持哈希（HASH）分布、随机（RANDOMLY）分布、复制（REPLICATED）分布三种分布方式。CREATE TABLE(.)[DISTRIBUTED BY([,.])|DISTRIBUTED RANDOMLY|DISTRIBUTED REPLICATED]说明 AnalyticDB ...
表结构设计
本文介绍如何设计 AnalyticDB MySQL版 的表结构（包括选择表类型、分布键、分区键、主键和聚集索引键等），从而实现表性能的优化。选择表类型 AnalyticDB MySQL版 支持复制表和普通表两种类型。在选择表类型时，需要注意如下几点：复制表会...
控制台总览
您可以在分布式链路跟踪控制台 总览 页面查看当前环境下所有应用的监控统计信息。应用监控指标分布图 应用监控指标 TOP5 排行 收藏的应用与链路 应用监控指标分布图 在 应用监控指标分布图 区域，您可以查看到在统计时间段内运行的所有应用...
概述
分布式事务 DTX（Distributed Transaction-eXtended）是蚂蚁集团自主研发的金融级分布式事务中间件，用来保障在大规模分布式环境下业务活动的最终一致性。在蚂蚁集团内部被广泛地应用于交易、转账、红包等核心资金链路，服务于亿级用户的...
常见问题
本文主要介绍在操作分布式事务过程中的常见问题。SOFAStack 是否可以部署在虚拟机、物理机上？可以，SOFAStack 部署支持物理机、虚机机 VM。SOFAStack 当前是否只支持阿里云飞天 ACK？SOFAStack 部署支持多云异构、目前支持华为云、开源 ...
分布式序列问题
分布式序列是否全局唯一 单库单表的分布式序列可以保证生成的序列 ID 全局唯一。分库分表的分布式序列仅保证单个分片的序列 ID 唯一，如果需要确保分库分表的分布式序列全局唯一，可以在序列 ID 中拼接分库分表位，以此保证全局唯一。分布...
附录：SOFAStack 产品目录
SOFAStack 源于自蚂蚁内部沉淀十多年的金融级分布式中间件技术体系，吸收了支付宝自创立以来在关键金融交易系统锤炼出来的架构实践。SOFAStack 所有的产品技术均经过蚂蚁集团自身严苛的金融场景验证，为金融交易技术保证风险安全的同时，...
产品优势
高性能 支持秒级别调度，轻量级分布式计算可以帮助您完成准实时的大数据跑批。节约成本和提升效率 无机器和人工运维成本，接入简单，提供报警监控。安全防护 多层次安全防护，包括：支持HTTPS，VPC访问。支持用户隔离、命名空间隔离和应用...
什么是分布式任务调度SchedulerX
分布式任务调度SchedulerX是阿里巴巴自研的分布式任务调度平台，兼容开源XXL-JOB、ElasticJob、Spring Schedule，K8s Job，支持Cron定时、一次性任务、可视化工作流任务编排和分布式跑批，具有高可用、可观测、可运维和低延时等能力。...
步骤五：到控制台验证
基于 开发单元化应用 中的转账与积分场景，在完成相应的转账或存款等操作后，您可以前往各个产品控制台验证单元化效果：分布式链路跟踪：查看单元间流量走向 分布式事务：查看事务执行情况 消息队列：查看消息轨迹 微服务：按单元推送动态...
和开源产品对比
有开源产品同样可以实现分布式任务调度，本文介绍SchedulerX和开源产品的对比，帮助您更好的了解分布式任务调度和SchedulerX。产品名称 定时调度 工作流 分布式任务 白屏化任务治理 任务类型 报警监控 使用成本 Quartz Cron 不支持 不支持 ...
安装日志采集客户端
instanceId 为机器组标识，可以在 分布式链路跟踪>设置 页面查看。region 为域环境标志，如华东 2（上海），即 cn-shanghai ，其值可参考 地域和可用区。执行运维脚本。在 金融分布式架构 控制台中选择 经典应用服务>日常运维>服务器运维，...
全场景解决方案
深度集成 OceanBase 分布式数据库以及 SOFA 金融级云原生分布式框架，保证应用和数据弹性扩展，同时具备高可用（RTO=0，RPO）和一致性，通过蚂蚁集团自身业务沉淀的“资金核对体系”、“全链路压测”等技术风险防控组件，可以保障分布式...
数据分布策略
AnalyticDB PostgreSQL版 支持三种数据在节点间的分布方式，分别是哈希（HASH）分布、随机（RANDOMLY）分布、复制（REPLICATED）分布。语法 CREATE TABLE table_name(.)[DISTRIBUTED BY(column[,.])|DISTRIBUTED RANDOMLY|DISTRIBUTED ...
步骤六：调拨应用流量
步骤三：查看业务链路 可以通过分布式链路跟踪（DST）查看具体的流量分布情况，在调整分片规则后，预期A到B的转账流量，将从 单元内 变为 跨单元。操作步骤如下：登录分布式链路跟踪控制台，左侧导航栏中选择 链路搜索。在 链路搜索 页面，...
FMT 模式参与者
分布式事务支持以 FMT 模式接入 SOFARPC 和 Dubbo 远程服务框架。本文将介绍如何：配置数据源 创建数据表 针对 SOFARPC 或 Dubbo 进行 发布服务 FMT 模式参与者只需要替换数据源，即可将对该数据源的访问纳入到分布式事务中。一个数据源...
基本概念
云数据库ClickHouse 的表从数据分布上，可以分为本地表和分布式表两种类型。类型 说明 区别 本地表（Local Table）数据只会存储在当前写入的节点上，不会被分散到多台服务器上。本地表的写入和查询，受限于单台服务器的存储、计算资源，不...
基础术语
发起方 initiator 分布式事务的发起方负责启动分布式事务，通过调用参与者的服务，将参与者纳入到分布式事务当中，并决定整个分布式事务是提交还是回滚。一个分布式事务有且只能有一个发起方。参与者 participant 参与者提供分支事务服务。...
API详情
分布情况 在区域③中选择 分布情况，可以查看域名、页面、UID、用户名和地理分布信息，并可以查看操作系统、浏览器、设备和网络制式各维度的占比。将鼠标悬浮于 域名 或 页面 列上，单击 设置为搜索值，可以将该域名或页面设置为筛选项。...
存储资源
存储资源是指用于存储和管理数据的硬件和软件资源，包括节点的本地磁盘、分布式文件存储、数据库和缓存等。存储资源的主要作用是存储和管理系统的数据。存储资源需要提供数据的持久性、可靠性和高效性，以满足系统的数据存储和访问需求。...
产品优势
高性能 支持秒级别调度，轻量级分布式计算可以帮助您完成准实时的大数据跑批。免运维、低成本 无机器和人工运维成本且接入简单。基础版成本是开源自建的三分之一；专业版集成了短信电话报警、日志服务、链路追踪、监控大盘等，无需额外费用...
本地盘最佳实践
方式二：搭建冗余架构 搭建多节点冗余数据架构，降低本盘故障带来的影响。您可以购买云盘，并将本盘数据实时拷贝到云盘；或者，在其他可用区或地域购买ECS实例并部署应用作为灾备。使用部署集提高可用性 为保证数据的可用性，建议您在应用...
功能特性
分布式事务（Distributed Transaction-eXtended，简称 DTX）是蚂蚁集团自主研发的金融级分布式事务中间件，支持跨数据库、跨服务以及混合的方式处理分布式应用，具备多种接入模式和金融级配套功能，本文将主要介绍分布式事务的功能特性。...
产品优势
高效 分布式搜索引擎，可以高效的支持海量数据的检索，同时也支持数据的实时更新（秒级生效），非常适用于对查询耗时敏感、时效性要求高的搜索场景。低成本 支持多种索引压缩策略，同时支持多值索引加载测试，能够以较低的成本满足用户的...
节点/数据库/表/分区/二级分区
通过Sharding技术，可以将用户数据打散到多个节点上，这样可以利用分布式的特性来进行并行计算，极大地提升性能。表 在HybridDB for MySQL中，表是一个逻辑概念。用户创建的表会根据分区key拆分到不同的分库中，每个分表就是通常我们所说的...
功能特性
通道服务提供了增量、全量、增量加全量三种类型的分布式数据实时消费通道。通过为数据表建立数据通道，您可以简单地实现对表中历史存量和新增数据的消费处理。通道服务 基础产品能力 功能集 功能 功能描述 参考文档 基础概念 地域 地域...
查询安全组规则
添加安全组规则后，您可以在ECS控制台上查询安全组规则的详细信息，并通过健康检查功能检测安全组中的冗余规则，可以帮助您简化安全组配置，减少管理工作量，提高网络管理的方便性和效率，同时降低安全漏洞的风险。本文介绍如何通过ECS控制...
名称解释
二级分区 在HybridDB for MySQL中表按照分布键进行一级分区后（变为事实表），可以再按照比如时间维度进行二级分区。例如在历史交易分析的场景，通常分区键设置为交易id（trad_id），二级分区键设置为日期。这样就可以存储一个月或者一年的...
表设计规范
表设计主要目标 降低存储成本 合理的表设计可以降低数据分层设计上的冗余存储，减少中间表的数据量大小。对表数据的生命周期进行正确的管理，也能够直接降低存储的数据量及存储成本。降低计算成本 规范化的表设计可以帮助您优化数据的读取...
产品功能
通过SchedulerX可以管理定时调度任务、查询任务执行记录和运行日志。本文介绍SchedulerX调度、执行和运维三个方面的功能。定时调度 Crontab 支持Unix Crontab表达式，不支持秒级别调度。更多信息，请参见 Cron。Fixed rate Crontab必须被60...
纠删码
背景信息 纠删码（Erasure Coding，EC）是一种数据冗余存储机制。它能通过一定的算法将k个原始数据块计算出m个冗余数据块，只要在这 k+m 个数据块中选择任意k个数据块就能计算得到所有的原始数据。当 k=4，m=2 时，在存储效率上等价于1.5...
数据分析整体趋势
随着Google等互联网企业崛起，以Hadoop为代表的基于传统x86服务器集群的大数据技术迅速发展，同时开源分布式数据库如Greenplum等也成为相应替代方案，为广大中小企业，尤其是互联网行业大大降低了数据分析的技术和成本门槛，还有分布式技术...
存储类型
说明 SSD云盘、ESSD云盘为分布式云盘，通过多副本冗余确保数据可靠性。如果所属RDS实例为高可用系列、集群系列，则具备秒级自动切换能力。SSD云盘、ESSD云盘可靠性、持久性和读写性能均会满足产品SLA承诺。查看存储类型 您可以在实例的 ...
- 产品推荐
- 这些文档可能帮助您