4.HDFS進(jìn)階:數(shù)據(jù)與元數(shù)據(jù)之間的關(guān)系

查看NameNode.java源文件

The NameNode controls two critical tables:

  1. filename->blocksequence (namespace)
  2. block->machinelist ("inodes")
    The first table is stored on disk and is very precious.
    The second table is rebuilt every time the NameNode comes up
    —— NameNode.java

文件名和blocksequence(塊順序)信息永久保存在namenode節(jié)點(diǎn)上
但是block位置信息則是存在于內(nèi)存之中

查看Goole File System論文第2.6.2節(jié)(摘錄)

namenode節(jié)點(diǎn)并不永久保存datanode所擁有副本的信息,而是在每次啟動的時候輪詢datanode獲取這些信息截驮,并且通過周期性的心跳獲取最新的信息。

這種設(shè)計簡化了在有datanode服務(wù)器加入集群戳晌、離開集群、更名猴娩、失效橡娄、以及重啟的時候拔莱,namenode服務(wù)器和datanode服務(wù)器數(shù)據(jù)同步的問題。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末匿又,一起剝皮案震驚了整個濱河市方灾,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖裕偿,帶你破解...
    沈念sama閱讀 221,820評論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件洞慎,死亡現(xiàn)場離奇詭異,居然都是意外死亡嘿棘,警方通過查閱死者的電腦和手機(jī)劲腿,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,648評論 3 399
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來鸟妙,“玉大人焦人,你說我怎么就攤上這事≈馗福” “怎么了花椭?”我有些...
    開封第一講書人閱讀 168,324評論 0 360
  • 文/不壞的土叔 我叫張陵,是天一觀的道長房午。 經(jīng)常有香客問我矿辽,道長,這世上最難降的妖魔是什么郭厌? 我笑而不...
    開封第一講書人閱讀 59,714評論 1 297
  • 正文 為了忘掉前任袋倔,我火速辦了婚禮,結(jié)果婚禮上折柠,老公的妹妹穿的比我還像新娘奕污。我一直安慰自己,他們只是感情好液走,可當(dāng)我...
    茶點(diǎn)故事閱讀 68,724評論 6 397
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著贾陷,像睡著了一般缘眶。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上髓废,一...
    開封第一講書人閱讀 52,328評論 1 310
  • 那天巷懈,我揣著相機(jī)與錄音,去河邊找鬼慌洪。 笑死顶燕,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的冈爹。 我是一名探鬼主播涌攻,決...
    沈念sama閱讀 40,897評論 3 421
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼频伤!你這毒婦竟也來了恳谎?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,804評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎因痛,沒想到半個月后婚苹,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 46,345評論 1 318
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡鸵膏,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,431評論 3 340
  • 正文 我和宋清朗相戀三年膊升,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片谭企。...
    茶點(diǎn)故事閱讀 40,561評論 1 352
  • 序言:一個原本活蹦亂跳的男人離奇死亡廓译,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出赞咙,到底是詐尸還是另有隱情责循,我是刑警寧澤,帶...
    沈念sama閱讀 36,238評論 5 350
  • 正文 年R本政府宣布攀操,位于F島的核電站院仿,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏速和。R本人自食惡果不足惜歹垫,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,928評論 3 334
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望颠放。 院中可真熱鬧排惨,春花似錦、人聲如沸碰凶。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,417評論 0 24
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽欲低。三九已至辕宏,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間砾莱,已是汗流浹背瑞筐。 一陣腳步聲響...
    開封第一講書人閱讀 33,528評論 1 272
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留腊瑟,地道東北人聚假。 一個月前我還...
    沈念sama閱讀 48,983評論 3 376
  • 正文 我出身青樓,卻偏偏與公主長得像闰非,于是被迫代替她去往敵國和親膘格。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,573評論 2 359

推薦閱讀更多精彩內(nèi)容

  • 首先财松,我們在使用前先看看HDFS是什麼闯袒?這將有助于我們是以后的運(yùn)維使用和故障排除思路的獲得。 HDFS采用mast...
    W_Bousquet閱讀 4,204評論 0 2
  • HDFS的設(shè)計目標(biāo) 通過上一篇文章的介紹我們已經(jīng)了解到HDFS到底是怎樣的東西,以及它是怎樣通過多副本機(jī)制來提供高...
    陌上疏影涼閱讀 1,448評論 0 3
  • (一)分布式文件系統(tǒng)概述 數(shù)據(jù)量越來越多政敢,在一個操作系統(tǒng)管轄的范圍存不下了其徙,那么就分配到更多的操作系統(tǒng)管理的磁盤中...
    時待吾閱讀 1,517評論 0 0
  • (一)分布式文件系統(tǒng)概述 數(shù)據(jù)量越來越多,在一個操作系統(tǒng)管轄的范圍存不下了喷户,那么就分配到更多的操作系統(tǒng)管理的磁盤中...
    時待吾閱讀 5,460評論 0 1
  • 幸福沉睡在湖畔的蘆葦里 我躡手躡腳走向它 想拔一根它的金羽毛 無奈 它立刻化成一只野雁 頭也不回地 飛走了
    OK稻米閱讀 191評論 0 1