7.Rabbit集群與高可用

1.為啥要做集群?

1)作用:集群主要用于實現(xiàn)高可用與負(fù)載均衡威始。高可用:如果集群中的某些 MQ 服務(wù)器不可用,客戶端還可以連接到其他 MQ 服務(wù)器。負(fù)載均衡:在高并發(fā)的場景下剩燥,單臺 MQ 服務(wù)器能處理的消息有限,可以分發(fā)給多臺 MQ 服務(wù)器立倍。

2)RabbitMQ 有兩種集群模式:普通集群模式和鏡像隊列模式灭红。

2.RabbitMQ 如何支持集群?

1).應(yīng)用做集群,需要面對數(shù)據(jù)同步和通信的問題口注。因為 Erlang 天生具備分布式的特性变擒,所以 RabbitMQ 天然支持集群,不需要通過引入 ZK 或者數(shù)據(jù)庫來實現(xiàn)數(shù)據(jù)同步寝志。

3.RabbitMQ 的節(jié)點類型?

1).集群兩種節(jié)點類型:一種是磁盤節(jié)點(Disc Node)娇斑,一種是內(nèi)存節(jié)點(RAM Node)。

2)磁盤節(jié)點:將元數(shù)據(jù)(包括隊列名字屬性澈段、交換機的類型名字屬性悠菜、綁定、vhost)放在磁盤中败富。

3) 內(nèi)存節(jié)點:將元數(shù)據(jù)放在內(nèi)存中悔醋。(內(nèi)存節(jié)點會將磁盤節(jié)點的地址存放在磁盤(不然重啟后就沒有辦法同步數(shù)據(jù)了)。如果是持久化的消息兽叮,會同時存放在內(nèi)存和磁盤芬骄。)

4.普通集群

1)為什么不直接把隊列的內(nèi)容(消息)在所有節(jié)點上復(fù)制一份?主要是出于存儲和同步數(shù)據(jù)的網(wǎng)絡(luò)開銷的考慮,如果所有節(jié)點都存儲相同的數(shù)據(jù)鹦聪,就無法達(dá)到線性地增加性能和存儲容量的目的(堆機器)。

2)缺點:不能保證隊列的高可用性泽本,因為隊列內(nèi)容不會復(fù)制

5.鏡像集群

1)第二種集群模式叫做鏡像隊列淘太。鏡像隊列模式下,消息內(nèi)容會在鏡像節(jié)點間同步规丽,可用性更高蒲牧。不過也有一定的副作用,系統(tǒng)性能會降低赌莺,節(jié)點過多的情況下同步的代價比較大冰抢。

鏡像集群

6.高可用

1)問題:集群搭建成功后,如果有多個內(nèi)存節(jié)點艘狭,那么生產(chǎn)者和消費者應(yīng)該連接到哪個內(nèi)存節(jié)點?如果在我們的代碼中根據(jù)一定的策略來選擇要使用的服務(wù)器挎扰,那每個地方都要修改翠订,客戶端的代碼就會出現(xiàn)很多的重復(fù),修改起來也比較麻煩遵倦。

2)解決:負(fù)載均衡的組件

負(fù)載均衡

3)負(fù)載分類:四層負(fù)載和七層負(fù)載尽超。

四層負(fù)載:作在 OSI 模型的第四層,即傳輸層(TCP 位于第四層)骇吭,它是根據(jù) IP端口進(jìn)行轉(zhuǎn)發(fā)(LVS 支持四層負(fù)載)橙弱。RabbitMQ 是 TCP 的 5672 端口。

四層負(fù)載

七層負(fù)載:工作在第七層燥狰,應(yīng)用層(HTTP 位于第七層)棘脐。可以根據(jù)請求資源類型分配到后端服務(wù)器(Nginx 支持七層負(fù)載;HAProxy 支持四層和七層負(fù)載龙致!

七層負(fù)載

4)問題:負(fù)載組件掛了怎么辦蛀缝?

1.負(fù)載組件掛了意味著客戶端就無法連接到任意一臺 MQ 的服務(wù)器了。所以負(fù)載軟件本身也需要做一個集群目代。新的問題又來了屈梁,如果有兩臺負(fù)載的軟件,客戶端應(yīng)該連哪個?

2.解決方案:負(fù)載之上再負(fù)載?陷入死循環(huán)了榛了。---》換思路

3.要求: 我們應(yīng)該需要這樣一個組件:1)它本身有路由(負(fù)載)功能在讶,可以監(jiān)控集群中節(jié)點的狀態(tài)(比如監(jiān)控HAProxy),如果某個節(jié)點出現(xiàn)異乘螅或者發(fā)生故障构哺,就把它剔除掉。2)為了提高可用性战坤,它也可以部署多個服務(wù)曙强,但是只有一個自動選舉出來的 MASTER 服務(wù)器(叫做主路由器),通過廣播心跳消息實現(xiàn)途茫。3)MASTER 服務(wù)器對外提供一個虛擬 IP碟嘴,提供各種網(wǎng)絡(luò)功能。也就是誰搶占到 VIP囊卜,就由誰對外提供網(wǎng)絡(luò)服務(wù)娜扇。應(yīng)用端只需要連接到這一個 IP 就行了。

4.解決方案:VRRP協(xié)議---》虛擬路由冗余協(xié)議 Virtual Router RedundancyProtocol栅组,這個組件就是 Keepalived袱衷,它具有 Load Balance 和 High Availability的功能。

7.基于 Docker 安裝 HAproxy 負(fù)載+Keepalived 高可用

1)模型

工作模型

2)步驟:1.我們規(guī)劃了兩個內(nèi)存節(jié)點笑窜,一個磁盤節(jié)點。所有的節(jié)點之間通過鏡像隊列的方式同步數(shù)據(jù)登疗。內(nèi)存節(jié)點用來給應(yīng)用訪問排截,磁盤節(jié)點用來持久化數(shù)據(jù)嫌蚤。2.為了實現(xiàn)對兩個內(nèi)存節(jié)點的負(fù)載,我們安裝了兩個 HAProxy断傲,監(jiān)聽兩個 5672和 15672 的端口脱吱。3.安裝兩個 Keepalived,一主一備认罩。兩個 Keepalived 搶占一個VIP192.168.8.220箱蝠。誰搶占到這個 VIP,應(yīng)用就連接到誰垦垂,來執(zhí)行對 MQ 的負(fù)載

3)分析:這種情況下宦搬,我們的 Keepalived 掛了一個節(jié)點,沒有影響劫拗,因為 BACKUP 會變成 MASTER间校,搶占 VIP。HAProxy 掛了一個節(jié)點页慷,沒有影響憔足,我們的 VIP 會自動路由的可用的 HAProxy 服務(wù)。RabbitMQ 掛了一個節(jié)點酒繁,沒有影響滓彰, 因為 HAProxy會自動負(fù)載到可用的節(jié)點。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末州袒,一起剝皮案震驚了整個濱河市揭绑,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌稳析,老刑警劉巖洗做,帶你破解...
    沈念sama閱讀 221,331評論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異彰居,居然都是意外死亡诚纸,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,372評論 3 398
  • 文/潘曉璐 我一進(jìn)店門陈惰,熙熙樓的掌柜王于貴愁眉苦臉地迎上來畦徘,“玉大人,你說我怎么就攤上這事抬闯【荆” “怎么了?”我有些...
    開封第一講書人閱讀 167,755評論 0 360
  • 文/不壞的土叔 我叫張陵溶握,是天一觀的道長杯缺。 經(jīng)常有香客問我,道長睡榆,這世上最難降的妖魔是什么萍肆? 我笑而不...
    開封第一講書人閱讀 59,528評論 1 296
  • 正文 為了忘掉前任袍榆,我火速辦了婚禮,結(jié)果婚禮上塘揣,老公的妹妹穿的比我還像新娘包雀。我一直安慰自己,他們只是感情好亲铡,可當(dāng)我...
    茶點故事閱讀 68,526評論 6 397
  • 文/花漫 我一把揭開白布才写。 她就那樣靜靜地躺著,像睡著了一般奖蔓。 火紅的嫁衣襯著肌膚如雪赞草。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 52,166評論 1 308
  • 那天锭硼,我揣著相機與錄音房资,去河邊找鬼。 笑死檀头,一個胖子當(dāng)著我的面吹牛轰异,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播暑始,決...
    沈念sama閱讀 40,768評論 3 421
  • 文/蒼蘭香墨 我猛地睜開眼搭独,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了廊镜?” 一聲冷哼從身側(cè)響起牙肝,我...
    開封第一講書人閱讀 39,664評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎嗤朴,沒想到半個月后配椭,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 46,205評論 1 319
  • 正文 獨居荒郊野嶺守林人離奇死亡雹姊,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 38,290評論 3 340
  • 正文 我和宋清朗相戀三年股缸,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片吱雏。...
    茶點故事閱讀 40,435評論 1 352
  • 序言:一個原本活蹦亂跳的男人離奇死亡敦姻,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出歧杏,到底是詐尸還是另有隱情镰惦,我是刑警寧澤,帶...
    沈念sama閱讀 36,126評論 5 349
  • 正文 年R本政府宣布犬绒,位于F島的核電站旺入,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏凯力。R本人自食惡果不足惜眨业,卻給世界環(huán)境...
    茶點故事閱讀 41,804評論 3 333
  • 文/蒙蒙 一急膀、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧龄捡,春花似錦、人聲如沸慷暂。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,276評論 0 23
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽行瑞。三九已至奸腺,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間血久,已是汗流浹背突照。 一陣腳步聲響...
    開封第一講書人閱讀 33,393評論 1 272
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留氧吐,地道東北人讹蘑。 一個月前我還...
    沈念sama閱讀 48,818評論 3 376
  • 正文 我出身青樓,卻偏偏與公主長得像筑舅,于是被迫代替她去往敵國和親座慰。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 45,442評論 2 359

推薦閱讀更多精彩內(nèi)容