一.目錄 本系列文章對(duì)Hadoop知識(shí)進(jìn)行復(fù)盤泪电。分為四個(gè)階段瘤缩，Copy階段澎嚣，Merge階段，Sort階段，Reduce階段。如下為ReduceT...

一.目錄 本系列文章對(duì)Hadoop知識(shí)進(jìn)行復(fù)盤。分為五個(gè)階段试幽，Read階段，Map階段卦碾，Collect階段铺坞，溢寫階段起宽，Combine階段。如下為...

一.目錄 本系列文章對(duì)Hadoop知識(shí)進(jìn)行復(fù)盤济榨。分為兩個(gè)階段坯沪，建立連接階段，提交job階段擒滑。 二.建立連接 客戶端提交MR程序后腐晾，首先是運(yùn)行jo...

抽象類：如果一個(gè)類含有抽象方法，則稱這個(gè)類為抽象類丐一，抽象類必須在類前用abstract關(guān)鍵字修飾藻糖。由于抽象方法只有聲明而沒有具體的實(shí)現(xiàn)，所以不能...

paxos算法是一種基于消息傳遞的且具有高度容錯(cuò)性的一種算法库车，解決的問題是一個(gè)分布式系統(tǒng)如何就某個(gè)值達(dá)成一致巨柒。該算法的前提是假設(shè)不存在拜占庭將軍...

主要通過事務(wù)日志以及數(shù)據(jù)快照來實(shí)現(xiàn)。事務(wù)日志：記錄了對(duì)zookeeper的操作凝颇，以axid命名潘拱，可以快速的定位到查詢的事務(wù)疹鳄。同時(shí)采用磁盤預(yù)分配策...

zookeeper中的ACL由三部分組成：權(quán)限模式拧略、授權(quán)對(duì)象、權(quán)限權(quán)限模式：IP digest world super

zookeeper中的事務(wù)都是由一個(gè)全局唯一的ID稱為zxid瘪弓，zxid由兩部分組成：一部分為leader周期epoch垫蛆，一部分為遞增計(jì)數(shù)器。從...

2pc,3pc,paxos,zab在分布式應(yīng)用中腺怯，每個(gè)節(jié)點(diǎn)都知道自己的事務(wù)提交的結(jié)果是成功或者失敗袱饭，但是無法直接獲取其他分布式節(jié)點(diǎn)的結(jié)果。因此需...