RocketMQ4.1.0災(zāi)備恢復(fù)方案

一、 正常運(yùn)行中集群狀態(tài)(雙機(jī)雙主)以及宕機(jī)狀態(tài)

準(zhǔn)備三臺(tái)機(jī)器192.168.213.145/128/129般婆;192.168.213.129為宕機(jī)恢復(fù)集群所用機(jī)器;
雙主集群:
192.168.213.145:30011
192.168.213.128:30011
正常運(yùn)行狀態(tài):
cd ~/rocketmq4.1/bin/
sh mqadmin clusterList -n 192.168.213.145:30011 查看集群節(jié)點(diǎn)信息
sh mqadmin topicList -n 192.168.213.145:30011 查看Topic信息


1.png

sh mqadmin statsAll -n 192.168.213.145:30011 查看24小時(shí)內(nèi)每秒的消息吞吐量挣柬,以及消息生產(chǎn)消費(fèi)總量


2.png

宕機(jī)時(shí)狀態(tài):
在broker-a主機(jī)192.168.213.145上進(jìn)行集群查詢钥顽,狀態(tài)異常庇忌;
3.png

二舞箍、 部署新的RocketMQ節(jié)點(diǎn)(namesrv和broker節(jié)點(diǎn))

RocketMQ版本以及配置文件保持和原來(lái)的一致(這里以RocketMQ4.1.0為例)
舊配置文件
mqnamesrv.properties
listenPort=30011
broker-a.properties
brokerClusterName=TEST_Cluster
brokerName=broker-a
brokerId=0
brokerRole=ASYNC_MASTER
flushDiskType=ASYNC_FLUSH
namesrvAddr=192.168.213.145:30011;192.168.213.128:30011
brokerIP1=192.168.213.145
autoCreateTopicEnable=false
autoCreateSubscriptionGroup=false
listenPort=10911
broker-b.properties
brokerClusterName=TEST_Cluster
brokerName=broker-b
brokerId=0
brokerRole=ASYNC_MASTER
flushDiskType=ASYNC_FLUSH
namesrvAddr=192.168.213.145:30011;192.168.213.128:30011
brokerIP1=192.168.213.128
autoCreateTopicEnable=false
autoCreateSubscriptionGroup=false
listenPort=10911
假如broker-b所在機(jī)器宕機(jī),新的broker-b配置文件broker-b.properties
broker-b.properties
brokerClusterName=TEST_Cluster
brokerName=broker-b
brokerId=0
brokerRole=ASYNC_MASTER
flushDiskType=ASYNC_FLUSH
namesrvAddr=192.168.213.145:30011;192.168.213.129:30011
brokerIP1=192.168.213.129
autoCreateTopicEnable=false
autoCreateSubscriptionGroup=false
listenPort=10911
最終的broker-a配置文件broker-a.properties
broker-a.properties
brokerClusterName=TEST_Cluster
brokerName=broker-a
brokerId=0
brokerRole=ASYNC_MASTER
flushDiskType=ASYNC_FLUSH
namesrvAddr=192.168.213.145:30011;192.168.213.129:30011
brokerIP1=192.168.213.145
autoCreateTopicEnable=false
autoCreateSubscriptionGroup=false
listenPort=10911

三皆疹、 數(shù)據(jù)遷移

宕機(jī)節(jié)點(diǎn)數(shù)據(jù)遷移疏橄,進(jìn)行集群恢復(fù)

同步宕機(jī)機(jī)器上數(shù)據(jù)文件(或者磁盤(pán)掛載)至新機(jī)器:
在宕機(jī)機(jī)器(192.168.213.128)上分別執(zhí)行以下同步命令:
rsync -avP ~/ rocketmq4.1/logs docker@192.168.213.129:/home/docker/data/
rsync -avP ~/store docker@192.168.213.129:/home/docker/data/

image.png

在192.168.213.129上創(chuàng)建軟鏈指向拷貝而來(lái)的數(shù)據(jù)目錄:
image.png

注意:
由于從宕機(jī)機(jī)器同步而來(lái)的store目錄下存在abort文件(由于異常關(guān)閉而未來(lái)得及刪除的文件),所以當(dāng)啟動(dòng)新節(jié)點(diǎn)的時(shí)候會(huì)有一個(gè)校驗(yàn)數(shù)據(jù)的過(guò)程略就。

image.png

注意V4.1.0和V3.5.8(以某項(xiàng)目152.14/15為例)在此步驟的區(qū)別:

在宕機(jī)機(jī)器上先后執(zhí)行如下命令:
rsync -avP ~/ rocketmq/logs docker@192.168.213.129:/home/docker/data/
rsync -avP ~/rocketmq/store docker@192.168.213.129:/home/docker/data/
在新節(jié)點(diǎn)機(jī)器上創(chuàng)建數(shù)據(jù)指向軟鏈命令:
cd ~/rocketmq/
ln –s ~/data/store store
ln –s ~/data/logs logs

2捎迫、丟棄宕機(jī)節(jié)點(diǎn)數(shù)據(jù),進(jìn)行集群恢復(fù)

直接進(jìn)入下一步残制,啟動(dòng)提前準(zhǔn)備好的新節(jié)點(diǎn)立砸。

四掖疮、 啟動(dòng)新節(jié)點(diǎn)初茶,檢查集群狀態(tài)

在192.168.213.129上rocketmq的bin目錄下執(zhí)行以下命令啟動(dòng)新的節(jié)點(diǎn):
nohup sh mqnamesrv -c ../conf/mqnamesrv.properties &

image.png

nohup sh mqbroker -c ../conf/2m-noslave/broker-b.properties &
image.png

在192.168.213.129上執(zhí)行命令,出現(xiàn)如圖為正常浊闪;
sh mqadmin clusterList -n 192.168.213.129:30011
image.png

sh mqadmin topicList -n 192.168.213.129:30011
image.png

在192.168.213.145上執(zhí)行命令恼布,出現(xiàn)下圖為正常;
sh mqadmin clusterList -n 192.168.213.145:30011
image.png

宕機(jī)域名切換至新加入集群節(jié)點(diǎn)所在機(jī)器IP192.168.213.129搁宾,逐個(gè)重啟舊的未宕機(jī)節(jié)點(diǎn)192.168.213.145
sh mqshutdown broker
sh mqshutdown namesrv
image.png

image.png

修改未宕機(jī)節(jié)點(diǎn)所在機(jī)器192.168.213.145上rocketmq的配置文件
舊環(huán)境配置文件:
image.png

把上圖中紅色框線部分修改為新的namesrv服務(wù)地址折汞,如下圖:
image.png

重新啟動(dòng)舊的未宕機(jī)節(jié)點(diǎn)192.168.213.145
nohup sh mqnamesrv -c ../conf/mqnamesrv.properties &
image.png

image.png

image.png

image.png

檢查集群狀態(tài),以及運(yùn)行情況:
在192.168.213.145:執(zhí)行命令sh mqadmin clusterList -n 192.168.213.145:30011
sh mqadmin statsAll -n 192.168.213.145:30011
image.png

在192.168.213.129:執(zhí)行命令sh mqadmin clusterList -n 192.168.213.129:30011
sh mqadmin statsAll -n 192.168.213.129:30011
image.png

如上圖盖腿,集群狀態(tài)恢復(fù)正常爽待。

五、 跟蹤觀察集群狀態(tài)變化翩腐,觀察業(yè)務(wù)日志是否正常鸟款。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市茂卦,隨后出現(xiàn)的幾起案子何什,更是在濱河造成了極大的恐慌,老刑警劉巖等龙,帶你破解...
    沈念sama閱讀 222,681評(píng)論 6 517
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件处渣,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡蛛砰,警方通過(guò)查閱死者的電腦和手機(jī)罐栈,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 95,205評(píng)論 3 399
  • 文/潘曉璐 我一進(jìn)店門(mén),熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)泥畅,“玉大人荠诬,你說(shuō)我怎么就攤上這事。” “怎么了浅妆?”我有些...
    開(kāi)封第一講書(shū)人閱讀 169,421評(píng)論 0 362
  • 文/不壞的土叔 我叫張陵望迎,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我凌外,道長(zhǎng)辩尊,這世上最難降的妖魔是什么? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 60,114評(píng)論 1 300
  • 正文 為了忘掉前任康辑,我火速辦了婚禮摄欲,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘疮薇。我一直安慰自己胸墙,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 69,116評(píng)論 6 398
  • 文/花漫 我一把揭開(kāi)白布按咒。 她就那樣靜靜地躺著迟隅,像睡著了一般。 火紅的嫁衣襯著肌膚如雪励七。 梳的紋絲不亂的頭發(fā)上智袭,一...
    開(kāi)封第一講書(shū)人閱讀 52,713評(píng)論 1 312
  • 那天,我揣著相機(jī)與錄音掠抬,去河邊找鬼吼野。 笑死,一個(gè)胖子當(dāng)著我的面吹牛两波,可吹牛的內(nèi)容都是我干的瞳步。 我是一名探鬼主播,決...
    沈念sama閱讀 41,170評(píng)論 3 422
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼腰奋,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼单起!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起氛堕,我...
    開(kāi)封第一講書(shū)人閱讀 40,116評(píng)論 0 277
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤馏臭,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后讼稚,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體括儒,經(jīng)...
    沈念sama閱讀 46,651評(píng)論 1 320
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,714評(píng)論 3 342
  • 正文 我和宋清朗相戀三年锐想,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了帮寻。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 40,865評(píng)論 1 353
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡赠摇,死狀恐怖固逗,靈堂內(nèi)的尸體忽然破棺而出浅蚪,到底是詐尸還是另有隱情,我是刑警寧澤烫罩,帶...
    沈念sama閱讀 36,527評(píng)論 5 351
  • 正文 年R本政府宣布惜傲,位于F島的核電站,受9級(jí)特大地震影響贝攒,放射性物質(zhì)發(fā)生泄漏盗誊。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 42,211評(píng)論 3 336
  • 文/蒙蒙 一隘弊、第九天 我趴在偏房一處隱蔽的房頂上張望哈踱。 院中可真熱鬧,春花似錦梨熙、人聲如沸开镣。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 32,699評(píng)論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)邪财。三九已至,卻和暖如春肌割,著一層夾襖步出監(jiān)牢的瞬間瘫辩,已是汗流浹背苍日。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 33,814評(píng)論 1 274
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留纽疟,地道東北人榨惠。 一個(gè)月前我還...
    沈念sama閱讀 49,299評(píng)論 3 379
  • 正文 我出身青樓奋早,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親赠橙。 傳聞我的和親對(duì)象是個(gè)殘疾皇子耽装,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,870評(píng)論 2 361

推薦閱讀更多精彩內(nèi)容