本地盘最佳实践

使用部署集提高可用性 为保证数据的可用性,建议您在应用层数据冗余。您可以使用部署集将业务涉及到的几台ECS实例分散部署在不同的物理服务器上,保证业务的高可用性和底层容灾能力。详情请参见 创建部署集。本地盘数据迁移到云盘 如果您...

公共规范

将出现大量空值和零值的统计汇总表,依据其空值和零值分布状况可以做适当的水平和垂直切分,以减少存储和下游的扫描数据量。空值处理原则 汇总类指标的空值:空值处理,填充为零,当前MaxCompute基于列存储的压缩技术不会由于填充大量空值...

流式数据通道概述

MaxCompute流式数据通道服务功能点如下:提供流式语义API:通过流式服务的API可以方便地开发出分布式数据同步服务。支持自动创建分区:解决数据同步服务并发创建分区导致的并发抢锁问题。支持增量数据异步聚合(Merge):提升数据存储效率...

新功能发布记录

2023-09-19 全部 设置TLS版本 2023年07月 功能名称 功能概述 发布时间 支持地域 相关文档 资源包换购 您可以将已购买的OSS资源包下的 标准-本地冗余存储包 换购至OSS 预留空间。2023-07-20 全部 资源包换购指南 预留空间升级 购买 预留空间...

分布键的选择策略

如果建表时未指定分布键,则默认表的主键为分布键,如果表没有主键,则默认将第一列当做分布键。您可以选择一个或多个列作为分布键,示例如下:create table t1(c1 int,c2 int)distributed by(c1,c2);谨慎选择随机分布DISTRIBUTED RANDOMLY...

网络架构容灾

同时当地址池整体不可用时,可以做备份切换。健康检查:依托于云监控强大的分布式监控功能,GTM新增了HealthCheck模块,如下图中序号2所示,从多个地区对地址池内的多个应用服务IP地址发起健康探测,目前已支持HTTP/HTTPS、TCP、ping三种...

查看集群日报与分析

Hive库存储格式分布Top信息展示如下:库TextFile存储格式数据量分布Top 库Parquet存储格式数据量分布Top 库ORC存储格式数据量分布Top Hive表信息 Hive表信息包含以下部分:Hive表详细信息 Hive表文件大小分布Top信息 Hive表冷热数据分布Top...

表结构设计

本文介绍如何设计 AnalyticDB MySQL版 的表结构(包括选择表类型、分布键、分区键、主键和聚集索引键等),从而实现表性能的优化。选择表类型 AnalyticDB MySQL版 支持复制表和普通表两种类型。在选择表类型时,需要注意如下几点:复制表会...

可用性与可靠性

AnalyticDB PostgreSQL版 是基于MPP架构的分布式数据库,对于所有的分布式系统来说,在通过分布式来增强性能的同时,也带来了节点故障率增高的问题,通常分布式系统会通过多副本的方式来保证系统在某些节点异常情况下仍然可以正常提供服务...

产品概述

代理层不仅可以做安全认证、保护和会话保持,还可以解析SQL,把写操作发送到主节点,把读操作均衡地分发到多个只读节点,实现自动的读写分离。计算节点 一写多读集群内有一个读写节点以及多个只读节点,多主集群(仅MySQL版支持)内可支持...

扩展MapReduce(MR2)

MapReduce模型通常由多个MapReduce作业组成,每个作业执行完成后都需要将数据写入磁盘,然而后续的Map任务很可能只需要读取一遍这些数据,为之后的Shuffle阶段准备,这种情况就产生了冗余的磁盘IO操作。MaxCompute的计算调度逻辑可以支持...

基本概念

发起方 Initiator,分布式事务的发起方负责启动分布式事务,通过调用参与者的服务,将参与者纳入到分布式事务当中,并决定整个分布式事务是提交还是回滚。一个分布式事务有且只能有一个发起方。分组标识 用于在网关上全局的唯一标识,...

产品功能

Fixed rate专门用来定期轮询,可以弥补Crontab的不足,且表达式简单,详情请参见 Fixed rate。不支持秒级别。Second delay:适用于对实时性要求比较高的业务,例如执行间隔为10秒的定时调度任务,详情请参见 Second delay。支持秒级别。...

功能支持情况

在对延迟不敏感的应用场景,也可以做直播用途。不适用 简单下载 简单下载指的是使用OSS API的GetObject接口,下载已上传的Object,适用于一次HTTP请求交互即可完成下载的场景。支持通过JindoSDK简单下载 断点续传下载 OSS提供了从Object...

存储空间地域属性

在对延迟不敏感的应用场景,也可以做直播用途。✓×简单下载 简单下载指的是使用OSS API的GetObject接口,下载已上传的Object,适用于一次HTTP请求交互即可完成下载的场景。✓ ✓ 断点续传下载 OSS提供了从Object指定的位置开始下载的功能...

资源画像

ACK为K8s原生的工作负载提供了资源画像的能力,通过对资源使用量历史数据的分析,实现了容器粒度的资源规格推荐,可以有效简化为容器配置Request和Limit的复杂度。本文介绍如何通过控制台和命令行使用资源画像功能。前提条件及注意事项 仅...

表设计规范

可以通过拆表或者分区来提升性能。数据集市层:数据将被按需保留1~3年。数据集市的数据比较容易生成,所以无需保留久远的历史数据。按数据变更规划数据的保存方式:记录客户属性、产品属性的历史变化情况,以便追溯某个时点的值。在...

纠删码

背景信息 纠删码(Erasure Coding,EC)是一种数据冗余存储机制。它能通过一定的算法将k个原始数据块计算出m个冗余数据块,只要在这 k+m 个数据块中选择任意k个数据块就能计算得到所有的原始数据。当 k=4,m=2 时,在存储效率上等价于1.5...

专线连接类

具体操作,请参见:本地IDC通过负载冗余专线连接上云 本地IDC通过主备冗余专线连接上云 IDC通过BGP主备专线链路上云方案 是否可以通过一条物理专线与多个VPC互连?可以。您可以通过云企业网实现本地数据中心和多个VPC私网互通。是否可以...

名称解释

本文对HybridDB for MySQL相关名词如下解释。地域 地域(Region)指的是用户所购买的HybridDB for MySQL(原名PetaData)数据库的服务器所处的地理位置。用户需要在开通HybridDB for MySQL数据库时指定,购买实例后不支持更改。在购买...

关键技术竞争力

异构兼容标准管控 SOFA Mesh 提供平台无关、语言无关、轻量无侵入特性的云原生方案,实现了传统应用平滑上云,支持异构系统之间的互联互通,传统应用向分布式架构平滑升级,提供了既支持基于 ESB 的传统 SOA 架构又支持 Spring Cloud 和 ...

创建逻辑模型:维度表

设置表字段信息 完成上述操作后,模型所需字段即已被添加至该模型中,此时您可以根据业务需求设置模型各字段的 关联字段、冗余字段、关联粒度/指标。设置字段属性。字段属性默认展示 字段名称、类型、字段显示名、描述、主键、非空、度量...

CREATE INDEX

说明 索引表支持冗余列,冗余可以帮助加速查询,避免回查主表。如果只是冗余某几个列可以使用Include。Include(c1,c2)表示冗余c1和c2列。默认表的索引构建方式是同步的,但是如果添加Async表示异步构建,需要执行BUILD INDEX命令。索引表...

应用场景

分布式事务可应用在多个涉及数据库操作的领域,尤其在金融领域可以做到全场景的覆盖与落地验证,包括:支付与转账、账务:对于吞吐量有很高的要求 金融与理财:往往涉及的金额较大,所以对于产品的稳定性要求非常高 保险与监管报送:参与方...

什么是 SOFATracer

界面展示能力 SOFATracer 可以将链路跟踪数据远程上报到开源产品 Zipkin 做分布式链路跟踪的展示。统一配置能力 配置文件中提供丰富的配置能力以定制化应用的个性需求。应用场景 解决在实施大规模微服务架构时的链路跟踪问题,达到透视化...

OSS合规管理最佳实践

OSS合规管理最佳实践是基于产品的最佳实践,对存储空间的读写设置、防护设置、同城冗余设置合规性检测。本文为您介绍OSS合规管理最佳实践合规包中的默认规则。规则名称 规则描述 OSS存储空间ACL禁止公共读 OSS存储空间的ACL策略禁止公共...

分布定义

选择表分布策略 AnalyticDB PostgreSQL 支持哈希(HASH)分布、随机(RANDOMLY)分布、复制(REPLICATED)分布三种分布方式。CREATE TABLE(.)[DISTRIBUTED BY([,.])|DISTRIBUTED RANDOMLY|DISTRIBUTED REPLICATED]说明 AnalyticDB ...

CDM公共维度层设计规范

拆分与冗余 对于维度属性过多,涉及源较多的维度表(例如会员表),可以做适当拆分:拆分为核心表和扩展表。核心表相对字段较少,刷新产出时间较早,优先使用。扩展表字段较多,且可以冗余核心表部分字段,刷新产出时间较晚,适合数据分析...

实现任务调度

在EDAS控制台中,已经无缝集成了阿里巴巴的分布式任务调度系统SchedulerX作为核心组件,以实现高效的任务调度管理功能。本文将介绍如何在您的Spring Cloud应用中使用SchedulerX实现任务调度,并部署到EDAS中,实现一个 简单Job单机版 的...

控制台总览

可以分布式链路跟踪控制台 总览 页面查看当前环境下所有应用的监控统计信息。应用监控指标分布图 应用监控指标 TOP5 排行 收藏的应用与链路 应用监控指标分布图 在 应用监控指标分布图 区域,您可以查看到在统计时间段内运行的所有应用...

概述

分布式事务 DTX(Distributed Transaction-eXtended)是蚂蚁集团自主研发的金融级分布式事务中间件,用来保障在大规模分布式环境下业务活动的最终一致性。在蚂蚁集团内部被广泛地应用于交易、转账、红包等核心资金链路,服务于亿级用户的...

什么是企业级分布式应用服务EDAS

企业级分布式应用服务EDAS(Enterprise Distributed Application Service)是一个应用托管和微服务管理的云原生PaaS平台,提供应用开发、部署、监控、运维等全栈式解决方案,同时支持Spring Cloud和Apache Dubbo(以下简称Dubbo)等微服务...

分布式序列问题

分布式序列是否全局唯一 单库单表的分布式序列可以保证生成的序列 ID 全局唯一。分库分表的分布式序列仅保证单个分片的序列 ID 唯一,如果需要确保分库分表的分布式序列全局唯一,可以在序列 ID 中拼接分库分表位,以此保证全局唯一。分布...

产品优势

高性能 支持秒级别调度,轻量级分布式计算可以帮助您完成准实时的大数据跑批。节约成本和提升效率 无机器和人工运维成本,接入简单,提供报警监控。安全防护 多层次安全防护,包括:支持HTTPS,VPC访问。支持用户隔离、命名空间隔离和应用...

数仓分层

可以结合企业的数据使用特点,将明细事实表的某些重要属性字段适当冗余,也即宽表化处理。在Dataphin中,明细数据层的表通常也被称为事实逻辑表。汇总数据层(DWS,Data Warehouse Summary):以分析的主题对象作为建模驱动,基于上层的...

常见问题

可以分布式事务已经打通了 SOFABoot、Dubbo、消息队列、数据访问代理、RDS、MySQL、Oracle、OceanBase 之间的事务。服务 A 调用服务 B,服务 A 上加了分布式事务并开启事务注解,服务 B 没有注解,那么 A 和 B 是否在同一个分布式事务中...

什么是分布式任务调度SchedulerX

分布式任务调度SchedulerX是阿里巴巴自研的分布式任务调度平台,兼容开源XXL-JOB、ElasticJob、Spring Schedule,K8s Job,支持Cron定时、一次性任务、可视化工作流任务编排和分布式跑批,具有高可用、可观测、可运维和低延时等能力。...

原理架构

本文简单介绍数据同步服务的整个系统架构及基本实现原理。系统架构 数据同步服务的逻辑架构图:全量同步:负责将表数据从源端数据库同步到目的端数据库...T1 小于 T2,因此数据不会漏掉,存储的数据从 T1-1 分钟的位点开始拉取,一定冗余

步骤五:到控制台验证

基于 开发单元化应用 中的转账与积分场景,在完成相应的转账或存款等操作后,您可以前往各个产品控制台验证单元化效果:分布式链路跟踪:查看单元间流量走向 分布式事务:查看事务执行情况 消息队列:查看消息轨迹 微服务:按单元推送动态...

和开源产品对比

有开源产品同样可以实现分布式任务调度,本文介绍SchedulerX和开源产品的对比,帮助您更好的了解分布式任务调度和SchedulerX。产品名称 定时调度 工作流 分布式任务 白屏化任务治理 任务类型 报警监控 使用成本 Quartz Cron 不支持 不支持 ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
文件存储 CPFS 云消息队列 RocketMQ 版 企业级分布式应用服务 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用