redis的主從同步(一)2.8版本以前的方式

最近我們的一個(gè)服務(wù)要解決一個(gè)主節(jié)點(diǎn)向從節(jié)點(diǎn)同步數(shù)據(jù)的問(wèn)題旺芽,就來(lái)翻了翻書(shū),研究了下redis是怎么實(shí)現(xiàn)主從同步的擅这,來(lái)總結(jié)一下

今天先來(lái)說(shuō)一下2.8版本之前是如何實(shí)現(xiàn)的

redis中澈魄,實(shí)現(xiàn)主從復(fù)制的方式主要有兩種

1.配置文件中設(shè)置slaveof選項(xiàng)
配置文件地方
  • 在從服務(wù)器的配置文件配置slaveof選項(xiàng)
  • 配置如下:
slaveof <masterip> <masterport>
  • masterip 為redis主服務(wù)器的ip
  • masterport 為redis主服務(wù)的redis服務(wù)端口
2.從服務(wù)器上使用客戶(hù)端發(fā)送slaveof命令
從服務(wù)上發(fā)送命令
  • 使用客戶(hù)端,連接到從服務(wù)器上
  • 在從服務(wù)器上發(fā)送slaveof命令
  • 命令如下:
slaveof masterip masterport
  • masterip 為redis主服務(wù)器的ip
  • masterport 為redis主服務(wù)的redis服務(wù)端口

redis主從同步功能的原理

  • redis的主從同步功能主要分為兩個(gè)操作
  • 同步(sync)操作
  • 命令傳播(command propagate)兩個(gè)操作
  • 同步(sync)操作主要作用是將當(dāng)前從服務(wù)器的狀態(tài)更新至主服務(wù)器的狀態(tài)仲翎,也就是把當(dāng)前主服務(wù)器中的所有數(shù)據(jù)同步至從服務(wù)中
  • 命令傳播(command propagate) 使用同步(sync)操作完成后痹扇,主服務(wù)器會(huì)把所有執(zhí)行的命令傳遞到從服務(wù)器,讓主從保持一致

先說(shuō)說(shuō)同步(sync)操作

  • 當(dāng)從服務(wù)器向主服務(wù)器發(fā)送slaveof命令時(shí)溯香,要求同步主服務(wù)事鲫构,會(huì)先執(zhí)行同步(sync)操作,主要作用是將當(dāng)前從服務(wù)器的狀態(tài)更新至主服務(wù)器的狀態(tài)玫坛,也就是把當(dāng)前主服務(wù)器中的所有數(shù)據(jù)同步至從服務(wù)中
  • 同步(sync)操作的流程如下
同步(sync)操作的流程
同步(sync)操作的流程
  • 1.從服務(wù)器向主服務(wù)器發(fā)送slaveof命令
  • 2.主服務(wù)器接受到slaveof命令后
  • 3.開(kāi)始執(zhí)行BGSAVE命令
  • 4.在后臺(tái)生成一個(gè)RDB文件
  • 5.并使用一個(gè)緩沖區(qū)記錄從開(kāi)始執(zhí)行的所有命令
  • 6.主服務(wù)器BGSAVE命令執(zhí)行完畢
  • 7.主服務(wù)器將BGSAVE命令生成的RDB文件發(fā)送至從服務(wù)器
  • 8.從服務(wù)器接受RDB文件并且載入
  • 9.將自己的數(shù)據(jù)庫(kù)狀態(tài)更新至主服務(wù)器執(zhí)行BGSAVE命令時(shí)的數(shù)據(jù)庫(kù)狀態(tài)
  • 10.主服務(wù)器將記錄在緩沖區(qū)中里所有的寫(xiě)命令發(fā)送給從服務(wù)器
  • 11.從服務(wù)器執(zhí)行這些命令完成整個(gè)同步過(guò)程

再說(shuō)說(shuō)命令傳播(command propagate) 操作

  • 當(dāng)同步(sync)操作執(zhí)行完畢后结笨,此時(shí),主從服務(wù)器的數(shù)據(jù)庫(kù)狀態(tài)達(dá)到了一致?tīng)顟B(tài)
  • 然后主服務(wù)器會(huì)將自己執(zhí)行的寫(xiě)命令發(fā)送給從服務(wù)器,從服務(wù)器會(huì)執(zhí)行主服務(wù)器發(fā)過(guò)來(lái)的命令炕吸,來(lái)實(shí)現(xiàn)同步伐憾,就是傳播(command propagate) 操作
借用書(shū)上圖舉個(gè)整體流程的例子
時(shí)間 主服務(wù)器 從服務(wù)器
T0 執(zhí)行 SET K1 V1 命令
T1 執(zhí)行 SET K2 V2 命令
T2 向主服務(wù)器發(fā)送slaveof命令
T3 1.主服務(wù)器接受到slaveof命令后 2.開(kāi)始執(zhí)行BGSAVE命令 3.在后臺(tái)生成一個(gè)RDB文件,包含K1赫模、K2 4.并使用一個(gè)緩沖區(qū)記錄從開(kāi)始執(zhí)行的所有命令
T4 SET K3 V3,并把命令寫(xiě)入緩沖區(qū)
T5 SET K4 V4,并把命令寫(xiě)入緩沖區(qū)
T6 BGSAVE命令執(zhí)行完畢树肃,向從服務(wù)器發(fā)送RDB文件
T7 接收并載入主服務(wù)器發(fā)來(lái)的RDB文件, 獲得K1瀑罗、K2數(shù)據(jù)
T8 向從服務(wù)器發(fā)送緩沖區(qū)中的SET K3 V3胸嘴、 SET K4 V4
T9 接收并執(zhí)行主服務(wù)器發(fā)來(lái)的兩個(gè)命令, 執(zhí)行了SET K3 V3斩祭、SET K4 V4命令
T10 同步(sync操作完成)劣像,此時(shí)主服務(wù)器中有K1、K2停忿、K3驾讲、K4 四個(gè)key 同步(sync操作完成),此時(shí)主服務(wù)器中有K1席赂、 K2、K3时迫、K4 四個(gè)key,數(shù)據(jù)庫(kù)狀態(tài)同步一致
T11 執(zhí)行 SET K5 V5 命令颅停,并且命令傳播(command propagate) 把命令傳遞給從服務(wù) 執(zhí)行主服務(wù)器傳遞過(guò)來(lái)的 SET K5 V5 命令
T12 執(zhí)行 SET K6 V6 命令,并且命令傳播 (command propagate) 把命令傳遞給從服務(wù) 執(zhí)行主服務(wù)器傳遞過(guò)來(lái)的 SET K6 V6 命令
T13 主從服務(wù)器斷開(kāi)連接掠拳,并重連成功 主從服務(wù)器斷開(kāi)連接癞揉,并重連成功
T14 重新開(kāi)始同步(sync)操作,重復(fù)上述流程

2.8版本之前主從同步的缺陷

  • 2.8版本之前主從同步存在一些缺陷
  • 按照上面的表格
  • 如果是初次主從同步溺欧,是沒(méi)有問(wèn)題的
  • 如果同步(sync)操作完成后喊熟,同步了K1、K2數(shù)據(jù)姐刁,此時(shí)芥牌,主從服務(wù)器之間處于命令傳播 (command propagate) 階段,傳遞了K3聂使、K4命令壁拉,然后主從服務(wù)器之間斷開(kāi)連接
  • 當(dāng)主從服務(wù)器重新建立連接后,主從服務(wù)器之間又開(kāi)始執(zhí)行同步(sync)操作
  • 此時(shí)的同步(sync)操作柏靶,主服務(wù)器生成RDB文件弃理,RDB文件包含的key是從第一次同步中的K1開(kāi)始,包含K1屎蜓、K2痘昌、K3、K4
  • 雖然還是可以完成同步(sync)操作,但是其實(shí)有很多key是沒(méi)有必要再次同步的
  • 因?yàn)橥剑╯ync)操作中辆苔,需要主服務(wù)器生成RDB文件笔诵,這個(gè)操作會(huì)占用服務(wù)器的大量的資源:CPU、內(nèi)存姑子、IO
  • 而主從服務(wù)器之間傳遞RDB文件會(huì)占用服務(wù)器帶寬
  • 從服務(wù)器加載RDB文件時(shí)乎婿,同樣會(huì)占用服務(wù)器的大量的資源:CPU、內(nèi)存街佑、IO
  • 所以沒(méi)有沒(méi)有必要的同步(sync)操作會(huì)損耗服務(wù)器資源谢翎,降低服務(wù)的性能

今天講了redis的主從同步中的2.8版本以前的方式,最后說(shuō)了2.8版本以前的方式中的一些缺陷沐旨,下次再來(lái)講講2.8版本以后的方式森逮,歡迎大家來(lái)交流,指出文中一些說(shuō)錯(cuò)的地方磁携,讓我加深認(rèn)識(shí)褒侧,愿大家沒(méi)有bug,謝謝谊迄!

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末闷供,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子统诺,更是在濱河造成了極大的恐慌歪脏,老刑警劉巖,帶你破解...
    沈念sama閱讀 222,000評(píng)論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件粮呢,死亡現(xiàn)場(chǎng)離奇詭異婿失,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī)啄寡,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,745評(píng)論 3 399
  • 文/潘曉璐 我一進(jìn)店門(mén)豪硅,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人挺物,你說(shuō)我怎么就攤上這事懒浮。” “怎么了姻乓?”我有些...
    開(kāi)封第一講書(shū)人閱讀 168,561評(píng)論 0 360
  • 文/不壞的土叔 我叫張陵嵌溢,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我蹋岩,道長(zhǎng)赖草,這世上最難降的妖魔是什么? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 59,782評(píng)論 1 298
  • 正文 為了忘掉前任剪个,我火速辦了婚禮秧骑,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己乎折,他們只是感情好绒疗,可當(dāng)我...
    茶點(diǎn)故事閱讀 68,798評(píng)論 6 397
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著骂澄,像睡著了一般吓蘑。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上坟冲,一...
    開(kāi)封第一講書(shū)人閱讀 52,394評(píng)論 1 310
  • 那天磨镶,我揣著相機(jī)與錄音,去河邊找鬼健提。 笑死琳猫,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的私痹。 我是一名探鬼主播脐嫂,決...
    沈念sama閱讀 40,952評(píng)論 3 421
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼紊遵!你這毒婦竟也來(lái)了账千?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書(shū)人閱讀 39,852評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤癞蚕,失蹤者是張志新(化名)和其女友劉穎蕊爵,沒(méi)想到半個(gè)月后,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體桦山,經(jīng)...
    沈念sama閱讀 46,409評(píng)論 1 318
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,483評(píng)論 3 341
  • 正文 我和宋清朗相戀三年醋旦,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了恒水。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 40,615評(píng)論 1 352
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡饲齐,死狀恐怖钉凌,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情捂人,我是刑警寧澤御雕,帶...
    沈念sama閱讀 36,303評(píng)論 5 350
  • 正文 年R本政府宣布,位于F島的核電站滥搭,受9級(jí)特大地震影響酸纲,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜瑟匆,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,979評(píng)論 3 334
  • 文/蒙蒙 一闽坡、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦疾嗅、人聲如沸外厂。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 32,470評(píng)論 0 24
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)汁蝶。三九已至,卻和暖如春论悴,著一層夾襖步出監(jiān)牢的瞬間掖棉,已是汗流浹背。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 33,571評(píng)論 1 272
  • 我被黑心中介騙來(lái)泰國(guó)打工意荤, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留啊片,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 49,041評(píng)論 3 377
  • 正文 我出身青樓玖像,卻偏偏與公主長(zhǎng)得像紫谷,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子捐寥,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,630評(píng)論 2 359

推薦閱讀更多精彩內(nèi)容