RocketMQ整体结构

本文链接： https://blog.csdn.net/heroqiang/article/details/84754980

RocketMQ 结构

在这里插入图片描述

概述

Apache RocketMQ是一个分布式消息传递和流平台，具有低延迟，高性能和可靠性，万亿级容量和灵活的可扩展性。它由四部分组成：NameServer、broker、producer 和 consumer。它们中的每一个都可以水平扩展而没有单点故障。如上图所示。

NameServer集群

NameServer提供轻量级服务发现和路由。每个NameServer记录完整的路由信息，提供相应的读写服务，并支持快速存储扩展。

Broker集群

Broker通过提供轻量级的TOPIC和QUEUE机制来处理消息存储。它们支持Push和Pull模型，包含容错机制（2个副本或3个副本），并提供强大的峰值填充和以原始时间顺序堆积数千亿条消息的能力。此外，Broker还提供容灾恢复，丰富的埋点统计和报警机制，所有这些在传统的消息传递系统中都是缺乏的。

Producer集群

生产者支持分布式部署。分布式的Producer通过多种负载均衡模式向Broker集群发送消息。发送过程支持快速失败并具有低延迟性。

Consumer集群

消费者也支持Push和Pull模型中的分布式部署。它还支持集群消费和消息广播。它提供实时消息订阅机制，可以满足大多数消费者的需求。RocketMQ的网站为感兴趣的用户提供了一个简单的快速入门指南。

NameServer

NameServer 是一个功能齐全的服务器，主要包括两个功能：

Broker管理，NameServer接受来自Broker集群的注册，并提供心跳机制来检查Broker是否存活。
路由管理，每个NameServer将保存有关Broker群集的整个路由信息和客户端查询的队列信息。

我们知道，RocketMQ客户端（生产者/消费者）将从NameServer查询队列路由信息，但客户端如何找到NameServer地址？

将NameServer地址列表提供给客户端有四种方法：

编程方式，如producer.setNamesrvAddr("ip:port")。
Java选项，使用rocketmq.namesrv.addr。
环境变量，使用NAMESRV_ADDR。
HTTP Endpoint。

关于如何找到NameServer的更多信息请参考官方文档：http://rocketmq.apache.org/rocketmq/four-methods-to-feed-name-server-address-list/

Broker Server

Broker服务器负责消息存储和传递，消息查询，HA保证等。

如下图所示，Broker服务器有几个重要的子模块：

Remoting模块，即Broker的entry，处理来自客户端的请求。
客户端管理，管理客户端（生产者/消费者）并维护消费者的主题订阅。
存储服务，提供简单的API来存储或查询物理磁盘中的消息。
HA服务，提供主Broker和从Broker之间的数据同步功能。
索引服务，按指定key构建消息索引，并提供快速消息查询。