java基礎(chǔ)教程欄目今天詳細(xì)介紹有關(guān)RocketMQ知識(shí)。
又是好久沒有寫博客了,雖然可以找出無數(shù)個(gè)沒有寫的博客的理由,但是說到底,還是一個(gè)字“懶”。今天我終于吃了一顆治療懶癌的藥丸,決定寫一篇博客。介紹什么好呢,思來想去,還是介紹下RocketMQ吧,畢竟寫了30多篇博客,還沒有好好寫過關(guān)于MQ的博客呢。本篇博客比較基礎(chǔ),不涉及到源碼分析,只是掃盲。
MQ有什么用
解耦
我覺得從某種角度來說,微服務(wù)促進(jìn)了MQ的蓬勃發(fā)展,本來一個(gè)系統(tǒng)有N多個(gè)模塊,所有模塊都強(qiáng)耦合在一起,現(xiàn)在微服務(wù)了,一個(gè)模塊就是一個(gè)系統(tǒng),系統(tǒng)之間肯定需要交互,交互有三種常見的方法,一種是RPC,一種是HTTP,一種就是MQ了。
異步
原本一個(gè)業(yè)務(wù)分為N步,要一步一步處理,才能把最終的結(jié)果返回給用戶,現(xiàn)在有了MQ,先把最關(guān)鍵的部分處理完畢,然后發(fā)送消息到MQ,直接返回給用戶OK,至于后面的步驟在后臺(tái)慢慢處理吧,真乃提升用戶體驗(yàn)的神器。
削峰
某個(gè)接口的請(qǐng)求量突然飆升,勢必會(huì)對(duì)應(yīng)用服務(wù)器、數(shù)據(jù)庫服務(wù)器造成很大的壓力,現(xiàn)在有了MQ,來多少請(qǐng)求都不在怕的,后臺(tái)慢慢處理唄。
RocketMQ簡介
RocketMQ是用Java編寫的,是阿里開源的消息中間件,吸收了Kafka很多優(yōu)點(diǎn)。Kafka也是比較熱門的消息中間件,不過Kafka是用Scala編寫的,不利于Java程序員去閱讀源碼,也不利于Java程序員做一些定制化的開發(fā)。接觸過Kafka的小伙伴都知道,要用好Kafka實(shí)屬不易,相對(duì)來說,RocketMQ簡單多了,而且RocketMQ有阿里加持,經(jīng)歷了N次雙11的考驗(yàn),比較適合國內(nèi)互聯(lián)網(wǎng)公司,所以國內(nèi)使用RocketMQ的公司很多。
RocketMQ四大組件
圖片來自gitee.com/mirrors/roc…
可以看到RocketMQ主要有四個(gè)組件:
NameServer
- 無狀態(tài)服務(wù),注冊(cè)中心,可集群部署,但是NameServer節(jié)點(diǎn)之間沒有任何數(shù)據(jù)交互。
- Borker會(huì)以定時(shí)把Topic路由信息上報(bào)給所有的NameServer。Producer、Consumer會(huì)隨機(jī)選擇一個(gè)NameServer定時(shí)Topic更新路由信息。
- Topic路由信息在NameServer集群中采用最終一致性。
- 保證AP。
Borker
- RocketMQ的服務(wù)端,用于存儲(chǔ)消息、分發(fā)消息。
- Borker會(huì)定時(shí)把自身擁有的所有的Topic路由信息上報(bào)給NameServer。
- Borker有兩個(gè)角色:Master、Follower,Master承擔(dān)讀(消費(fèi)消息)寫(生產(chǎn)消息)操作,如果Master比較忙,或者不可用,F(xiàn)ollower可以承擔(dān)讀操作。BorkerId=0,代表是Matser,BorkerId!=0,代表是Follower,需要注意的有兩點(diǎn): 其一,目前為止,BorkerId=1的Follower才可以承擔(dān)讀操作; 其二,只有較高版本的RocketMQ才支持當(dāng)Master節(jié)點(diǎn)掛掉,F(xiàn)ollower自動(dòng)升級(jí)到Master。
Producer
生產(chǎn)者,每隔一定時(shí)間向NameServer發(fā)起Topic的路由信息查詢。
Consumer
消費(fèi)者,每隔一定時(shí)間向NameServer發(fā)起Topic的路由信息查詢。
為什么注冊(cè)中心不選用Zookeeper
其實(shí),在低版本的RocketMQ中,確實(shí)是選用Zookeeper作為注冊(cè)中心的,但是后面改成了現(xiàn)在的NameServer,猜想主要原因是:
- RocketMQ已經(jīng)是一個(gè)中間件了,不想再依賴其他中間件。
- Zookeeper比較重,有很多功能RocketMQ是用不到的,不如寫一個(gè)輕量級(jí)的注冊(cè)中心。
- Zookeeper是CP,一旦觸發(fā)領(lǐng)導(dǎo)選舉,那么注冊(cè)中心就不可用了,而RocketMQ的注冊(cè)中心,不需要強(qiáng)一致性,只要保證最終一致性。
RocketMQ消息領(lǐng)域模型
Message
- 傳輸?shù)南ⅰ?/li>
- 消息必須有Topic。
- 消息可以有多個(gè)Tag和多個(gè)Key,可以看做消息的附加屬性。
Topic
- 一類消息的集合。
- 每個(gè)消息必須有一個(gè)Topic。
- 消息的第一級(jí)類型。
Tag
- 一個(gè)消息除了有Topic之外,還可以有Tag,用來細(xì)分同一個(gè)Topic下的不同種類的消息。
- Tag不是必須的。
- 消息的第二級(jí)類型。
Group
分為ProducerGroup,ConsumerGroup,我們