日韩无码专区无码一级三级片|91人人爱网站中日韩无码电影|厨房大战丰满熟妇|AV高清无码在线免费观看|另类AV日韩少妇熟女|中文日本大黄一级黄色片|色情在线视频免费|亚洲成人特黄a片|黄片wwwav色图欧美|欧亚乱色一区二区三区

RELATEED CONSULTING
相關咨詢
選擇下列產品馬上在線溝通
服務時間:8:30-17:00
你可能遇到了下面的問題
關閉右側工具欄

新聞中心

這里有您想知道的互聯網營銷解決方案
九個問答牢記RocketMQ架構

RocketMQ是Java兄弟們常用的消息中間件,雖說常用,但對于RocketMQ架構經常忘記。究其原因就l兩點:忙于業(yè)務開發(fā)然后長時間不看則忘了、不理解架構設計的根本原因記不牢。本文用大白話描述架構設計過程,牢記RocketMQ架構。

創(chuàng)新互聯網站建設提供從項目策劃、軟件開發(fā),軟件安全維護、網站優(yōu)化(SEO)、網站分析、效果評估等整套的建站服務,主營業(yè)務為成都網站制作、成都做網站,app軟件定制開發(fā)以傳統(tǒng)方式定制建設網站,并提供域名空間備案等一條龍服務,秉承以專業(yè)、用心的態(tài)度為用戶提供真誠的服務。創(chuàng)新互聯深信只要達到每一位用戶的要求,就會得到認可,從而選擇與我們長期合作。這樣,我們也可以走得更遠!

一、架構的思考過程

首先,在記框架的原理和架構時,要先把握全局的脈絡,在思考為什么這么設計,最后才是思考細節(jié),這樣才能記得牢。本文通過層層追問的方式,一步步解說RocketMQ架構設計的原因。

1、基本形態(tài)

(1) 如果你是RocketMQ的開發(fā)者,讓你來設計一個消息中間件,你會設計哪些角色?

答:起碼要設計3個角色:

  • 消息中轉站:Broker,Broker是核心,負責:接受消息、存儲消息、處理消費者的消費請求、備份容災等。
  • 生產者:Producer,生產消息然后投遞到Broker。
  • 消費者:Consumer,從Broker中消費消息。

2.消息怎么存

(2) 有了基本形態(tài)后,我們知道,具體的消息肯定是存在Broker里,那消息在Broker里應該怎么存儲呢?

答:這里借鑒實際生活中的案例,比如物流公司在發(fā)快遞時,發(fā)往同一個城市的快遞,肯定安排在一起,然后用同一批貨車運往那個城市,這樣整個物流體系運轉是最高效的。這里就用到了聚類的方式,讓相似的事物聚到一起。

同樣的,在設計怎么存儲消息時,也用到聚類的概念,我們把相同類型的消息,放到一個邏輯空間里,這個邏輯空間就是主題Topic。

(3) 那Topic的內部又是什么結構呢?

答:Topic的內部肯定是一個個的消息對象,那這些消息對象是以什么數據結構存在一起的呢?先發(fā)的消息,盡量要保證先被消費到,這里就用到了先進先出的數據結構-隊列,這就是消息隊列MessageQueue。所以,Topic內部是由MessageQueue組成,消息隊列內部存放著一個個的消息對象。

3.引入集群

(4) 我們知道Broker是RocketMQ的核心,這么重要的核心掛了怎么辦?

答:既然是RocketMQ的核心,肯定要保證高可用不能掛,所以RocketMQ 會部署多臺 Broker 組成一個集群對外提供服務。

4.再說消息怎么存

(5) RocketMQ為了保障高可用,會部署多臺Broker組成集群,那么集群場景下有多臺機器,Topic怎么存呢?

答:我們要學習毛主席的思想,“雞蛋不能放在一個籃子里”。既然是要存大量的消息,又有多臺Broker,為了分擔單臺機器性能壓力、分擔存儲容量壓力、保證數據容災,所以將不同的Topic存儲到不同的Broker里。

還是按照上面物流的例子說明,比如從北京發(fā)往南京的快遞,肯定用同一批貨車運送,快遞少則用一輛貨車,快遞多則用多輛貨車,快遞被劃分到了多個貨車上。同樣的,RocketMQ里的Topic也是分散存儲在多臺 Broker 上的,每臺Broker上存儲的消息內容是不同的。

(6) 如果不同的Topic存儲在不同的Broker里,可能某個topic數據太大了,出現數據傾斜直接干爆某個Broker怎么辦?

答:上面我們提到,Topic實際上是一個個隊列的集合,那只需要將隊列分散存儲到不同的Broker上就行了。

(7) 如果不同的Topic分散存儲在不同的Broker里,還是有數據丟失的風險,只不過某個topic丟失的數據變小而已,這種情況的數據容災備份怎么做呢?

答:這時候就會用到Broker的主-從架構,Broker按角色分為Master和Slave,主從之間會定期地進行數據同步。Master 負責響應客戶端的讀寫請求、存儲消息、處理消費者請求等,而 Slave 只負責同步 Master 的數據。

5.說說NameServer

(8) Broker既然是集群,那生產者在投遞消息時,總得知道有哪些Broker吧,總得知道要往哪個Broker里投遞消息吧,這又要怎么做呢?

答:RocketMQ引入了NameServer的概念,NameServer相當于大管家,RocketMQ里的所有基礎信息它都知道。NameServer 存儲了RocketMQ 集群的元數據。NameServer 中存放的元數據主要有:

  • 集群里都有哪些Broker?
  • 有哪些生產者?
  • 有哪些消費者?
  • 集群里都有哪些 Topic?
  • 這些 Topic 的消息隊列分別存在哪些 Broker 上?

(9) 那Nameserver如何知道這些消息呢?

答:類似古時候某個人去府里當差,當差之前要把自己的所有信息登記在冊。同樣的,Broker、Producer、Consumer在啟動時也會將數據注冊到 NameServer。

Broker 在啟動時會將自己注冊到 NameServer 上,通過心跳持續(xù)更新元數據。同樣的,Producer、Consumer也會和NameServer建立連接、動態(tài)交互集群中的數據,這樣即方便上報自己的信息和也方便獲取集群里的其他信息。

至此,RocketMQ的架構圖已經成型,每一個部件這么設計的原因也很清晰。

二、總結

RocketMQ里的核心角色有4個:Broker、Producer、Consumer、NameServer,消息存儲的核心對象有兩個:Topic、MessageQueue。

為了保證數據不丟失和數據不傾斜,同一個Topic里的MessageQueue會分散存儲在不同的Broker里。


網站標題:九個問答牢記RocketMQ架構
文章出自:http://m.5511xx.com/article/ccejpeh.html