一文了解Zookeeper的Watcher機(jī)制

Zookeeper系列介紹(持續(xù)更新

??Zookeeper提供了數(shù)據(jù)的發(fā)布/訂閱功能贡翘,多個(gè)訂閱者可同時(shí)監(jiān)聽(tīng)某一特定主題對(duì)象桦他,當(dāng)該主題對(duì)象的自身狀態(tài)發(fā)生變化時(shí)(例如節(jié)點(diǎn)內(nèi)容改變、節(jié)點(diǎn)下的子節(jié)點(diǎn)列表改變等)织阅,會(huì)實(shí)時(shí)拟蜻、主動(dòng)通知所有訂閱者绎签。

??Zookeeper采用了Watcher機(jī)制實(shí)現(xiàn)數(shù)據(jù)的發(fā)布/訂閱功能。該機(jī)制在被訂閱對(duì)象發(fā)生變化時(shí)會(huì)異步通知客戶端酝锅,因此客戶端不必在Watcher注冊(cè)后輪詢阻塞诡必,從而減輕了客戶端壓力。

Watcher機(jī)制實(shí)際上與觀察者模式類似屈张,也可看作是一種觀察者模式在分布式場(chǎng)景下的實(shí)現(xiàn)方式擒权。

watcher架構(gòu)

Watcher實(shí)現(xiàn)由三個(gè)部分組成:

  • Zookeeper服務(wù)端袱巨;
  • Zookeeper客戶端;
  • 客戶端的ZKWatchManager對(duì)象碳抄;

??客戶端首先將Watcher注冊(cè)到服務(wù)端愉老,同時(shí)將Watcher對(duì)象保存到客戶端的Watch管理器中。當(dāng)ZooKeeper服務(wù)端監(jiān)聽(tīng)的數(shù)據(jù)狀態(tài)發(fā)生變化時(shí)剖效,服務(wù)端會(huì)主動(dòng)通知客戶端嫉入,接著客戶端的Watch管理器會(huì)觸發(fā)相關(guān)Watcher來(lái)回調(diào)相應(yīng)處理邏輯,從而完成整體的數(shù)據(jù)發(fā)布/訂閱流程璧尸。


Watcher架構(gòu)

Watcher特性

特性 說(shuō)明
一次性 Watcher是一次性的咒林,一旦被觸發(fā)就會(huì)移除,再次使用時(shí)需要重新注冊(cè)
客戶端順序回調(diào) Watcher回調(diào)是順序串行化執(zhí)行的爷光,只有回調(diào)后客戶端才能看到最新的數(shù)據(jù)狀態(tài)垫竞。一個(gè)Watcher回調(diào)邏輯不應(yīng)該太多,以免影響別的watcher執(zhí)行
輕量級(jí) WatchEvent是最小的通信單元蛀序,結(jié)構(gòu)上只包含通知狀態(tài)欢瞪、事件類型和節(jié)點(diǎn)路徑,并不會(huì)告訴數(shù)據(jù)節(jié)點(diǎn)變化前后的具體內(nèi)容徐裸;
時(shí)效性 Watcher只有在當(dāng)前session徹底失效時(shí)才會(huì)無(wú)效遣鼓,若在session有效期內(nèi)快速重連成功,則watcher依然存在重贺,仍可接收到通知骑祟;

Watcher接口設(shè)計(jì)

??Watcher是一個(gè)接口,任何實(shí)現(xiàn)了Watcher接口的類就是一個(gè)新的Watcher气笙。Watcher內(nèi)部包含了兩個(gè)枚舉類:KeeperState次企、EventType。

watcher類圖

Watcher通知狀態(tài)(KeeperState)

??KeeperState是客戶端與服務(wù)端連接狀態(tài)發(fā)生變化時(shí)對(duì)應(yīng)的通知類型健民。路徑為org.apache.zookeeper.Watcher.Event.KeeperState抒巢,是一個(gè)枚舉類,其枚舉屬性如下秉犹;

枚舉屬性 說(shuō)明
Unknown(-1) 屬性過(guò)期
Disconnected(0) 客戶端與服務(wù)器斷開(kāi)連接時(shí)
NoSyncConnected(1) 屬性過(guò)期
SyncConnected(3) 客戶端與服務(wù)器正常連接時(shí)
AuthFailed(4) 身份認(rèn)證失敗時(shí)
ConnectedReadOnly(5) 3.3.0版本后支持只讀模式蛉谜,一般情況下ZK集群中半數(shù)以上服務(wù)器正常,zk集群才能正常對(duì)外提供服務(wù)崇堵。該屬性的意義在于:若客戶端設(shè)置了允許只讀模式型诚,則當(dāng)zk集群中只有少于半數(shù)的服務(wù)器正常時(shí),會(huì)返回這個(gè)狀態(tài)給客戶端鸳劳,此時(shí)客戶端只能處理讀請(qǐng)求
SaslAuthenticated(6) 服務(wù)器采用SASL做校驗(yàn)時(shí)
Expired(-112) 會(huì)話session失效時(shí)

Watcher事件類型(EventType)

??EventType是數(shù)據(jù)節(jié)點(diǎn)(znode)發(fā)生變化時(shí)對(duì)應(yīng)的通知類型狰贯。EventType變化時(shí)KeeperState永遠(yuǎn)處于SyncConnected通知狀態(tài)下;當(dāng)KeeperState發(fā)生變化時(shí),EventType永遠(yuǎn)為None涵紊。其路徑為org.apache.zookeeper.Watcher.Event.EventType傍妒,是一個(gè)枚舉類,枚舉屬性如下摸柄;

枚舉屬性 說(shuō)明
None (-1) 無(wú)
NodeCreated (1) Watcher監(jiān)聽(tīng)的數(shù)據(jù)節(jié)點(diǎn)被創(chuàng)建時(shí)
NodeDeleted (2) Watcher監(jiān)聽(tīng)的數(shù)據(jù)節(jié)點(diǎn)被刪除時(shí)
NodeDataChanged (3) Watcher監(jiān)聽(tīng)的數(shù)據(jù)節(jié)點(diǎn)內(nèi)容發(fā)生變更時(shí)(無(wú)論內(nèi)容數(shù)據(jù)是否變化)
NodeChildrenChanged (4) Watcher監(jiān)聽(tīng)的數(shù)據(jù)節(jié)點(diǎn)的子節(jié)點(diǎn)列表發(fā)生變更時(shí)

:客戶端接收到的相關(guān)事件通知中只包含狀態(tài)及類型等信息颤练,不包括節(jié)點(diǎn)變化前后的具體內(nèi)容,變化前的數(shù)據(jù)需業(yè)務(wù)自身存儲(chǔ)驱负,變化后的數(shù)據(jù)需調(diào)用get等方法重新獲揉戮痢;

Watcher注冊(cè)及通知流程

  • 客戶端Watcher管理器:ZKWatchManager數(shù)據(jù)結(jié)構(gòu)
//ZKWatchManager維護(hù)了三個(gè)map跃脊,key代表數(shù)據(jù)節(jié)點(diǎn)的絕對(duì)路徑宇挫,value代表注冊(cè)在當(dāng)前節(jié)點(diǎn)上的watcher集合

//代表節(jié)點(diǎn)上內(nèi)容數(shù)據(jù)、狀態(tài)信息變更相關(guān)監(jiān)聽(tīng)
private final Map<String, Set<Watcher>> dataWatches =
    new HashMap<String, Set<Watcher>>();

//代表節(jié)點(diǎn)變更相關(guān)監(jiān)聽(tīng)
private final Map<String, Set<Watcher>> existWatches =
    new HashMap<String, Set<Watcher>>();

//代表節(jié)點(diǎn)子列表變更相關(guān)監(jiān)聽(tīng)
private final Map<String, Set<Watcher>> childWatches =
    new HashMap<String, Set<Watcher>>();
  • 服務(wù)端Watcher管理器:WatchManager數(shù)據(jù)結(jié)構(gòu)
//WatchManager維護(hù)了兩個(gè)map
//說(shuō)明:WatchManager中的Watcher對(duì)象不是客戶端用戶定義的Watcher酪术,
//     而是服務(wù)端中實(shí)現(xiàn)了Watcher接口的ServerCnxn抽象類器瘪,
//     該抽象類代表了一個(gè)客戶端與服務(wù)端的連接

//key代表數(shù)據(jù)節(jié)點(diǎn)路徑,value代表客戶端連接的集合拼缝,該map作用為:
//通過(guò)一個(gè)指定znode路徑可找到其映射的所有客戶端娱局,當(dāng)znode發(fā)生變更時(shí)
//可快速通知所有注冊(cè)了當(dāng)前Watcher的客戶端
private final HashMap<String, HashSet<Watcher>> watchTable =
    new HashMap<String, HashSet<Watcher>>();

//key代表一個(gè)客戶端與服務(wù)端的連接彰亥,value代表當(dāng)前客戶端監(jiān)聽(tīng)的所有數(shù)據(jù)節(jié)點(diǎn)路徑
//該map作用為:當(dāng)一個(gè)連接徹底斷開(kāi)時(shí)咧七,可快速找到當(dāng)前連接對(duì)應(yīng)的所有
//注冊(cè)了監(jiān)聽(tīng)的節(jié)點(diǎn),以便移除當(dāng)前客戶端對(duì)節(jié)點(diǎn)的Watcher
private final HashMap<Watcher, HashSet<String>> watch2Paths =
    new HashMap<Watcher, HashSet<String>>();
  • Watcher注冊(cè)流程
//Packet對(duì)象構(gòu)造函數(shù)
//參數(shù)含義:請(qǐng)求頭任斋、響應(yīng)頭继阻、請(qǐng)求體、響應(yīng)體废酷、Watcher封裝的注冊(cè)體瘟檩、是否允許只讀
Packet(RequestHeader requestHeader, ReplyHeader replyHeader,
               Record request, Record response,
               WatchRegistration watchRegistration, boolean readOnly) {

            this.requestHeader = requestHeader;
            this.replyHeader = replyHeader;
            this.request = request;
            this.response = response;
            this.readOnly = readOnly;
            this.watchRegistration = watchRegistration;
        }
Watcher注冊(cè)流程.png
1. 客戶端發(fā)送的請(qǐng)求中只包含是否需要注冊(cè)Watcher,不會(huì)將Watcher實(shí)體發(fā)送澈蟆;
2. Packet構(gòu)造函數(shù)中的參數(shù)WatchRegistration是Watcher的封裝體墨辛,用于服務(wù)響應(yīng)成功后將Watcher保存到ZKWatchManager中;
  • Watcher通知流程


    Watcher通知流程
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末趴俘,一起剝皮案震驚了整個(gè)濱河市睹簇,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌寥闪,老刑警劉巖太惠,帶你破解...
    沈念sama閱讀 217,826評(píng)論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異疲憋,居然都是意外死亡凿渊,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,968評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門(mén),熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)埃脏,“玉大人搪锣,你說(shuō)我怎么就攤上這事〔势” “怎么了淤翔?”我有些...
    開(kāi)封第一講書(shū)人閱讀 164,234評(píng)論 0 354
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)佩谷。 經(jīng)常有香客問(wèn)我旁壮,道長(zhǎng),這世上最難降的妖魔是什么谐檀? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 58,562評(píng)論 1 293
  • 正文 為了忘掉前任抡谐,我火速辦了婚禮,結(jié)果婚禮上桐猬,老公的妹妹穿的比我還像新娘麦撵。我一直安慰自己,他們只是感情好溃肪,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,611評(píng)論 6 392
  • 文/花漫 我一把揭開(kāi)白布免胃。 她就那樣靜靜地躺著,像睡著了一般惫撰。 火紅的嫁衣襯著肌膚如雪羔沙。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書(shū)人閱讀 51,482評(píng)論 1 302
  • 那天厨钻,我揣著相機(jī)與錄音扼雏,去河邊找鬼。 笑死夯膀,一個(gè)胖子當(dāng)著我的面吹牛诗充,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播诱建,決...
    沈念sama閱讀 40,271評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼蝴蜓,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了俺猿?” 一聲冷哼從身側(cè)響起茎匠,我...
    開(kāi)封第一講書(shū)人閱讀 39,166評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎辜荠,沒(méi)想到半個(gè)月后汽抚,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,608評(píng)論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡伯病,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,814評(píng)論 3 336
  • 正文 我和宋清朗相戀三年造烁,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了否过。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 39,926評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡惭蟋,死狀恐怖苗桂,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情告组,我是刑警寧澤煤伟,帶...
    沈念sama閱讀 35,644評(píng)論 5 346
  • 正文 年R本政府宣布,位于F島的核電站木缝,受9級(jí)特大地震影響便锨,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜我碟,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,249評(píng)論 3 329
  • 文/蒙蒙 一放案、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧矫俺,春花似錦吱殉、人聲如沸。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 31,866評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至铅匹,卻和暖如春押赊,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背伊群。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 32,991評(píng)論 1 269
  • 我被黑心中介騙來(lái)泰國(guó)打工考杉, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人舰始。 一個(gè)月前我還...
    沈念sama閱讀 48,063評(píng)論 3 370
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像咽袜,于是被迫代替她去往敵國(guó)和親丸卷。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,871評(píng)論 2 354

推薦閱讀更多精彩內(nèi)容