MQ NameServer模块划分-低调大师

MQ NameServer模块划分

2017-07-27 534

上图是之前讨论确定的系统架构（后续内容会按照这个架构来叙述），其中：

NameServer做Broker的服务发现，即客户端可以通过NameServer拿到Broker的信息
Broker汇报数据到NameServer

NameServer的模块划分

在进行NameServer的模块划分讨论前，先整理一下NameServer的功能：

做Broker的服务发现
提供元数据（Topic、Group等）
也可以作为Console的操作入口（整个MQ系统是没有DB的，Console可以通过NameServer获取系统信息进行展示）

结合以上提供的功能和之前几篇对系统架构的介绍，NameServer是不需要对数据进行持久化的，因为NameServer的数据都是来自于Broker汇报的。可以认为NameServer是一个无状态的节点。NameServer可以非常方便的做集群部署，高可用之类的，只需要Broker将数据汇报到多个NameServer即可（RocketMQ就是这种架构）。

基于以上的约定（NameServer尽量简单，没有持久化等），对NameServer的模块划分如下。

1. 网络模块

这个不再多说了，属于最基础的公共模块了，Broker、Client、NameServer都会有。

除了基础的网络实现，还有网络相关的就是各个网络请求的处理，比如新建Topic、新建Group等。按照请求来源的维度，NameServer上会包含：

ClientPacketHandler
BrokerPacketHandler
ConsolePacketHandler
...

这些都是网络包的处理入口，可以算到网络模块中。

2. 元数据模块

除去网络模块外，NameServer剩余内容都是对元数据的汇总处理，包含以下组件：

TopicManager：Topic元数据的汇总，处理Topic的增删改查
GroupManager：Group元数据的汇总，处理Group的增删改查
BrokerManager：Broker的管控，进行Broker的上下线及配置变更等
PositionManager：汇总位点信息
InstanceManager：汇总Consumer和Producer实例

汇总以上内容，NameServer模块如下：

以上是基于NameServer的功能限定下讨论的模块。NameServer在MQ中是最简单的一个大模块，也是和消息发送和消费关系最小的模块，所以只有这么多内容。（NameServer更多在Consumer、Producer初始化的时候会涉及到，一旦运行起来，过程中并不需要进行太多的交互，所以运行过程中脱离了NameServer也是能正常执行消费和发送的）

RocketMQ的NameServer功能上更加简化，不超过1000行代码。

这就是RocketMQ（开源版本）NameServer所有的代码了

结语

本篇主要是把NameServer的组件罗列一下，相对来说比较简单。

下一篇会开始整理MQ系统中的数据流和操作流程，包括消息和元数据在MQ中的流转、元数据的操作、消息的写入、消息的读取等流程。

往期内容：

欢迎关注此公众号，将坚持不懈的写MQ相关的技术文章，希望能和更多的朋友交流。

如果本文对您有帮助，点一下右下角的“推荐”

微信关注我们

原文链接：https://yq.aliyun.com/articles/660449

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

中大型网站架构演变之路

网上有很多文章类似于今天要分享的主题，有架构师写的，有运维写的，还有开发写的，偏重点各不同！今天我以运维角度讲解中大型网站架构演变之路。一个成熟的网站架构并不是一开始设计就具备高可用、高伸缩、高性能等特性的，它是随着用户量和业务线不断增加，基础架构才逐渐健壮的。在发展初期，一般都是从0到1，不会一上来就整一些大而全的架构！适用业务：电商/门户/招聘网站开发语言：PHP和JAVA Web服务：Nginx/Tomcat8 数据库：MySQL 操作系统：CentOS 物理服务器：Dell R730/R430 视频版：https://ke.qq.com/course/219551 一、单台服务器部署项目开发完成上线，用户访问量寥寥无几。二、WEB与数据库独立部署有一定用户访问量，单台服务器性能有些吃力，想提高并发能力，增加一台服务器，将HTTP请求与SQL操作负载分散不同服务器。三、动静分离-初期什么是动静分离？静态页面与动态页面分离部署。四、数据库主从与查询缓存 RedisCache 使用Redis缓存数据库查询结果，将热数据放到内存中，提高查询速度，减少数据库请求。 M...

2017-07-28

604

随着物联网、人工智能等新兴技术的发展，各种新型微处理器的出现和应用的不断深化，嵌入式系统在后PC时代得到了空前的发展。对于如今大量出现的32位嵌入式应用， ARM嵌入式技术广泛地使用在许多嵌入式系统设计。这与ARM处理器的众多优势是分不开的。 ARM嵌入式开发.jpg 高性能、低功耗、低价格把ARM处理器的性能拿来和一些著名的通用处理器（如Pentium）相比是不合适的，因为他们各自针对的应用需求是不同的。Pentium处理器采用多条指令流水线的超标量结构，追求通用应用目标下的超强性能，功耗大，可以用散热器加风扇散热。ARM针对嵌入式应用，在满足性能要求的前提下，力求最低的功率消耗。ARM结构的优点是能兼顾到性能、功耗、代码密度、价格等几个方面，而且做得比较均衡。在性能/功耗比（MIPS/W）方面，ARM处理器具有业界领先的性能。基于ARM核的芯片价格也很低，目前arm CortexM的芯片价格可低至10元人民币左右。丰富的可选择芯片 ARM只是一个核，ARM公司自己不生产芯片，采用授权方式给半导体生产商。目前，全球几乎所有的半导体厂家都向ARM公司购买了各种ARM核，配上多种不同...

2017-07-28

563

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。