消息中间件集群-消息中间件集群文档介绍内容-阿里云

迁移上云操作

步骤四：更换接入点确认此次迁移范围内的所有生产者以及消费者，将源集群消息收发代码中的接入点修改为目标阿里云云消息队列 RocketMQ 版实例的接入点。步骤五：迁移消息业务按照Topic粒度，分阶段执行切流操作。步骤一：迁移评估执行...

顺序消息

与顺序消息相关的常见问题如下：顺序消息是否支持集群消费和广播消费？同一条消息是否可以既是顺序消息，同时又支持定时消息和事务消息？顺序消息支持哪些地域（Region）？顺序消息的使用范围是什么？顺序消息支持哪种消息发送方式？顺序...

迁移数据上云

本文介绍如何使用MirrorMaker将自建Kafka集群的数据迁移到云消息队列 Kafka 版集群。前提条件您已完成以下操作：下载迁移工具MirrorMaker 迁移Topic上云背景信息 Kafka的镜像特性可实现Kafka集群的数据备份。实现这一特性的工具就是...

迁移概述

本文介绍将自建Kafka集群迁移到云消息队列 Kafka 版实例的优势、原理、方案架构、迁移工具和操作流程。迁移优势将自建Kafka集群迁移到云消息队列 Kafka 版实例的优势，请参见产品优势。迁移原理对于消息队列来说，如果要实现集群...

开源RabbitMQ迁移上云

在使用开源RabbitMQ集群时，当您希望能够解决各种稳定性痛点（例如消息堆积、脑裂等问题）、实现高并发、分布式、灵活扩缩容时，您可以将开源RabbitMQ集群迁移至云消息队列 RabbitMQ 版，本文介绍迁移上云的前提条件、操作步骤、注意事项...

迁移上云概述

您可以将开源RocketMQ集群迁移到云消息队列 RocketMQ 版上以获得更好的业务体验，本文为您介绍开源RocketMQ集群迁移上云的方案及原理。产品差异对比和开源RocketMQ相比，阿里云云消息队列 RocketMQ 版在技术架构、弹性效率、运维复杂...

产品架构

云消息队列 RocketMQ 版在任何一个环境都是可扩展的，生产者必须是一个集群，消息服务器必须是一个集群，消费者也同样。集群级别的高可用，是云消息队列 RocketMQ 版跟其他的消息服务器的主要区别，消息生产者发送一条消息到消息服务器...

产品架构

消息队列在任何一个环境都是可扩展的，生产者必须是一个集群，消息服务器必须是一个集群，消费者也同样。集群级别的高可用，是消息队列跟其他的消息服务器的主要区别，消息生产者发送一条消息到消息服务器，消息服务器会随机的选择一个消费...

OnsGroupConsumerUpdate-配置消费集群的消息读取权限

配置指定Group ID对应的消费集群的消息读取权限。本接口一般用于禁止特定Group ID读取消息的场景。接口说明注意阿里云提供的 OpenAPI 属于管控类 API，用于管理和查询阿里云服务的相关资源。仅推荐在管控链路集成，消息收发的核心数据...

网络访问与安全设置

本文介绍如何进行云消息队列 Confluent 版集群的网络访问与安全设置。网络访问类型云消息队列 Confluent 版集群提供阿里云VPC访问和公网访问方式。阿里云VPC访问 VPC访问是指您在云消息队列 Confluent 版集群所在网络VPC内或者其它...

集群消费和广播消费

本文介绍 SOFAStack 消息队列的集群消费和广播消费的基本概念、适用场景以及注意事项。消息队列是基于发布/订阅模型的消息系统。消费者，即消息的订阅方订阅关注的 Topic，以获取并消费消息。由于消费者应用一般是分布式系统，以集群方式...

集群消费和广播消费

集群消费和广播消费是云消息队列 RocketMQ 版的基本消费模式，您可以在消费者客户端将消费模式设置为集群消费或者广播消费，用于控制同一条消息只能被集群内一个消费者消费到，还是会被集群内每个消费者都消费到。背景信息云消息队列 ...

基于Kubernetes容器集群的容灾架构与方案

本文以Kubernetes集群（包括容器服务 Kubernetes 版的ACK集群、第三方云厂商集群和本地IDC集群）为基础，结合阿里云的网络、数据库、中间件及可观测相关云产品，为您介绍如何设计容灾架构和方案，帮助您构建一个更加有“韧性”的系统。...

读写分离

PolarDB PostgreSQL版集群自带读写分离功能，通过一个集群地址（读写分离地址）实现读写请求的自动转发。背景信息在对数据库有少量写请求，但有大量读请求的应用场景下，单个节点可能无法承受读取压力，甚至对业务产生影响。使用集群地址...

读写分离

PolarDB PostgreSQL版（兼容Oracle）集群自带读写分离功能。应用程序只需连接一个集群地址，写请求会自动发往主节点，读请求会自动根据各节点的负载（当前未完成的请求数）发往主节点或只读节点。功能优势统一读写分离地址，方便维护。您...

什么是云消息队列 Confluent 版？

高吞吐能力：在海量消息堆积的情况下，始终能保持云消息队列 Confluent 版集群的高吞吐能力。全自动巡检运维体系保障，服务可用性达99.95%，数据可靠性达99.999999%。免运维、易观测：云消息队列 Confluent 版拥有专业且经验丰富的运维...

概述

SOFAStack 消息队列（SOFAStack MQ，简称 SOFAMQ）是基于 Apache RocketMQ 构建的分布式消息中间件，并与金融分布式架构 SOFAStack 深度集成，为分布式应用系统提供异步解耦和削峰填谷的能力，支持事务消息、顺序消息、定时消息等多种消息...

使用前必读

组件管理相关注册集群支持将多种云上中间件能力（例如日志采集和监控报警等）下沉到您的自建Kubernetes集群中使用，其中部分中间件需要访问对应的阿里云资源，使用前您需要提供AK并授予对应的云资源权限，同时使用该AK创建名为alibaba-...

实践教程概览

使用IMB软件和MPI通信库测试E-HPC通信性能 IMB（Intel MPI Benchmarks）用于评估HPC集群在不同消息粒度下节点间点对点、全局通信的效率。MPI（Message Passing Interface）是支持多编程语言的并行计算通信库，具有高性能、大规模性、可移植...

创建系统集群

说明目前中间件在单独的 VPC 环境内，如果您的系统集群地址没有公网 IP，请选择跨 VPC 集群。IP地址/域名：指定 IP 地址/域名，格式为地址：端口。IP 地址或域名：IP 地址格式为（1~200）.（0~200）.（0~200）.（0~200）。域名可以包含...

多主集群（库表）商业化

PolarDB MySQL版多主集群（库表）正式商业化。简介随着 PolarDB MySQL版客户的不断增加，大规模头部客户不断涌入，部分头部客户业务体量规模庞大，使得目前 PolarDB MySQL版的单写（一写多读）架构在特定场景下，写性能出现瓶颈。...

多主集群（库表）概述

本文将详细介绍多主集群（库表）的相关信息。随着 PolarDB MySQL版客户的不断增加，大规模头部客户不断涌入，部分头部客户业务体量规模庞大，使得目前 PolarDB MySQL版的单写（一写多读）架构在特定场景下，写性能出现瓶颈。PolarDB ...

产品简介

集群管理功能项说明集群创建 ACS集群与资源一体化，您无需运维管理集群和节点。通过YAML文件或控制台简单配置，即可快速创建部署业务，大幅降低使用K8s和云的门槛。更多信息，请参见创建ACS集群。连接集群通过获取KubeConfig并使用...

企业版产品系列

世界服游戏及电商场景：分钟级的扩缩容，适应快速增长的业务请求多主集群（库表）的秒级横向扩展和透明路由功能，结合中间件或业务分库分表可以实现透明的秒级扩展，将原来数天的扩容变为分钟级。分服游戏场景：更好的性能和扩展能力，...

产品架构

云消息队列 Kafka 版系统架构如云消息队列 Kafka 版的系统架构所示，一个云消息队列 Kafka 版集群包括Producer、Kafka Broker、Group、ZooKeeper。图 1.云消息队列 Kafka 版的系统架构 Producer 通过push模式向云消息队列 Kafka 版...

功能发布记录

全部自定义域名访问GitOps控制台新增基于Kubernetes容器集群的容灾架构与方案本实践内容以Kubernetes集群（包括容器服务 Kubernetes 版的ACK集群、第三方云厂商集群和本地IDC集群）为基础，结合阿里云的网络、数据库、中间件及可观测...

操作指南

您可以在云消息队列 Kafka 版控制台创建实例、...云消息队列 Kafka 版 V3系列Serverless实例管理 V2系列实例管理 Topic Group Connector生态集成迁移权限管理云消息队列 Confluent 版集群资源规格评估实例管理权限管理集群配置与使用

集群资源规格评估

对于云消息队列 Confluent 版集群来说，影响资源使用的因素众多，包括使用的业务场景、业务应用程序性能等，本文结合一般场景给出云消息队列 Confluent 版集群资源评估参考建议，帮助您在购买创建集群时评估集群规模。在集群创建完成后...

购买和部署实例

在使用Confluent集群前，您需要先购买和部署实例，本文介绍购买及部署实例的操作步骤。前提条件云消息队列 Confluent 版集群需要购买一定配额的SLB资源，购买之前需要确保账户处于非欠费状态。获取云消息队列 Kafka 版访问授权。步骤一：...

产品优势

云消息队列 Kafka 版 100%兼容开源，支持0.10.x~2.6.x的开源版本，无需代码改造无缝迁移上云，体验全托管、免运维的分布式消息队列服务。开箱即用云消息队列 Kafka 版 100%兼容开源，使您无缝迁移上云。兼容开源：云消息队列 Kafka 版 100...

订阅消息

云消息队列 RocketMQ 版支持以下两种订阅方式：集群订阅同一个Group ID所标识的所有Consumer平均分摊消费消息。例如某个Topic有9条消息，一个Group ID有3个Consumer实例，那么在集群消费模式下每个实例平均分摊，只消费其中的3条消息。...

订阅消息

订阅方式消息队列支持以下两种订阅方式：集群订阅同一个 Group ID 所标识的所有 Consumer 平均分摊消费消息。例如某个 Topic 有 9 条消息，一个 Group ID 有 3 个 Consumer 实例，那么在集群消费模式下每个实例平均分摊，只消费其中的 3 ...

Control Center基本使用

登录Control Center 创建云消息队列 Confluent 版集群，详情请参见购买和部署实例。在云消息队列 Kafka 版控制台的实例列表页面，单击目标实例名称。在实例详情页面，单击右上角的登录控制台，输入用户名和密码登录进入Control ...

功能特性

自动创建Topic 可靠性功能集功能功能描述参考文档同城容灾消息同步迁移用于在Kafka集群之间的数据同步或迁移，消息可以从一个集群（通常称为“源”）复制到另一个集群（通常称为“目标”或“备份”），可以在不同的数据中心之间进行...

查看迁移进度

本文说明如何查看自建Kafka集群迁移到云消息队列 Kafka 版的进度。前提条件您已开始自建Kafka集群迁移上云。迁移类型包括：通过命令行迁移迁移Topic上云迁移Group上云迁移数据上云通过元数据文件迁移上云迁移自建Kafka集群至新实例...

基本概念

本文说明云消息队列 Kafka 版涉及的专有名词和术语，帮助您更好地理解相关概念并使用该产品。Apache Kafka 一款开源的分布式数据流处理平台，可以实时发布、订阅、存储和处理数据流。更多信息，请参见 Apache Kafka。云消息队列 Kafka 版...

实例类型

底层硬件资源共享，多个实例共享同一个后端集群，由云消息队列 MQTT 版来保证多租户场景下的服务可用性。共享实例（逻辑隔离）。底层硬件资源共享，多个实例共享同一个后端集群，由云消息队列 MQTT 版来保证多租户场景下的服务可用性。...

Kafka数据迁移MaxCompute最佳实践

背景信息 Kafka是一款分布式发布与订阅的消息中间件，具有高性能、高吞量的特点被广泛使用，每秒能处理上百万的消息。Kafka适用于流式数据处理，主要应用于用户行为跟踪、日志收集等场景。一个典型的Kafka集群包含若干个生产者（Producer）...

队列（MessageQueue）

消息在队列中的位置和消息之间的顺序通过位点（Offset）进行标记管理。流式操作语义云消息队列 RocketMQ 版基于队列的存储模型可确保消息从任意位点读取任意数量的消息，以此实现类似聚合读取、回溯读取等特性，这些特性是RabbitMQ、...

迁移消费者程序

背景信息云消息队列 Kafka 版控制台提供迁移实例功能，您可以使用该功能将自建Kafka集群或其他云Kafka集群的元数据（Topic和Group配置信息）和消息数据同步到目标集群，迁移完成后目标集群的元数据与源集群的元数据保持一致并且持续更新...

消息中间件集群

新品推荐