1. 基本架构
RocketMQ
架构上主要分为四部分,如下图所示:
-
Producer
:消息发布的角色,支持分布式集群方式部署。Producer
通过MQ
的负载均衡模块选择相应的Broker
集群队列进行消息投递,投递的过程支持快速失败并且低延迟。 -
Consumer
:消息消费的角色,支持分布式集群方式部署。支持以push
推,pull
拉两种模式对消息进行消费。同时也支持集群方式和广播方式的消费,它提供实时消息订阅机制,可以满足大多数用户的需求。 -
NameServer
:NameServer
是一个非常简单的Topic
路由注册中心,其角色类似Dubbo
中的zookeeper
,支持Broker
的动态注册与发现。主要包括两个功能:-
Broker
管理,NameServer
接受Broker
集群的注册信息并且保存下来作为路由信息的基本数据。然后提供心跳检测机制,检查Broker
是否还存活; -
路由信息管理,每个
NameServer
将保存关于Broker
集群的整个路由信息和用于客户端查询的队列信息。然后Producer
和Conumser
通过NameServer
就可以知道整个Broker
集群的路由信息,从而进行消息的投递和消费。NameServer
通常也是集群的方式部署,各实例间相互不进行信息通讯。Broker
是向每一台NameServer
注册自己的路由信息,所以每一个NameServer
实例上面都保存一份完整的路由信息。当某个NameServer
因某种原因下线了,Broker
仍然可以向其它NameServer
同步其路由信息,Producer
,Consumer
仍然可以动态感知Broker
的路由的信息。
-
-
BrokerServer
:Broker
主要负责消息的存储、投递和查询以及服务高可用保证,为了实现这些功能,Broker
包含了以下几个重要子模块:-
Remoting Module
:整个Broker
的实体,负责处理来自clients
端的请求。 -
Client Manager
:负责管理客户端(Producer
/Consumer
)和维护Consumer
的Topic
订阅信息 -
Store Service
:提供方便简单的API接口处理消息存储到物理硬盘和查询功能。 -
HA Service
:高可用服务,提供Master Broker
和Slave Broker
之间的数据同步功能。 -
Index Service
:根据特定的Message key
对投递到Broker
的消息进行索引服务,以提供消息的快速查询。
-