Hadoop源碼分析-HDFS寫數(shù)據(jù)之申請block

4. 申請block

下面我們應(yīng)該再去從dataQueue中讀取packet了正卧。而從dataQueue讀取packetDatastream線程,所以我們直接看它的run方法

  1. Datastream.run()普筹,代碼比較多狮鸭,分開看看。
    1.1 這里看while的判斷條件性昭,如果dataQueue的size=0竿开,那么就等待

    image

    1.2 1:錯誤判斷捎琐,pass;2:空判斷pass;3:在這里獲取了第一個packet;
    image

    1.3 這里可注釋,就是從namenode上獲取block叉庐。其實還有管道舒帮。nextBlockOutputStream()這里是獲取block和管道。
    image

  2. Datastream.nextBlockOutputStream(),這里有個方法名字很怪locateFollowingBlock()陡叠,但是他就是申請block的方法玩郊。

    image

  3. Datastream.locateFollowingBlock(),看到了熟悉的RPC調(diào)用。那么接下來該去NanmeNodeRpcServer.addBlock()了匾竿。

    image

  4. NanmeNodeRpcServer.addBlock(),又是調(diào)用了 FSNamesystem 的一個方法瓦宜。那么我們跟進(jìn)FSNamesystem.getAdditionalBlock()吧。

    image

  5. FSNamesystem.getAdditionalBlock(),這的代碼比較多岭妖,還好有注釋临庇。
    5.1 看注釋,這里就是為新的block選擇目標(biāo)host.

    image

    5.2 1:創(chuàng)建個新的block;2:然后把創(chuàng)建的這個block信息添加到fsimage中并持久化(元數(shù)據(jù)管理的內(nèi)容);3:最后把block和5.1中獲得的主機地址一起封裝到LocatedBlock對象里.然后返回LocatedBlock昵慌。
    image

這些就是申請一個block了假夺。畫個圖簡單總結(jié)下:


image
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市斋攀,隨后出現(xiàn)的幾起案子已卷,更是在濱河造成了極大的恐慌,老刑警劉巖淳蔼,帶你破解...
    沈念sama閱讀 218,386評論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件侧蘸,死亡現(xiàn)場離奇詭異裁眯,居然都是意外死亡,警方通過查閱死者的電腦和手機讳癌,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,142評論 3 394
  • 文/潘曉璐 我一進(jìn)店門穿稳,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人晌坤,你說我怎么就攤上這事逢艘。” “怎么了骤菠?”我有些...
    開封第一講書人閱讀 164,704評論 0 353
  • 文/不壞的土叔 我叫張陵它改,是天一觀的道長。 經(jīng)常有香客問我商乎,道長央拖,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,702評論 1 294
  • 正文 為了忘掉前任截亦,我火速辦了婚禮爬泥,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘崩瓤。我一直安慰自己袍啡,他們只是感情好,可當(dāng)我...
    茶點故事閱讀 67,716評論 6 392
  • 文/花漫 我一把揭開白布却桶。 她就那樣靜靜地躺著境输,像睡著了一般。 火紅的嫁衣襯著肌膚如雪颖系。 梳的紋絲不亂的頭發(fā)上嗅剖,一...
    開封第一講書人閱讀 51,573評論 1 305
  • 那天,我揣著相機與錄音嘁扼,去河邊找鬼信粮。 笑死,一個胖子當(dāng)著我的面吹牛趁啸,可吹牛的內(nèi)容都是我干的强缘。 我是一名探鬼主播,決...
    沈念sama閱讀 40,314評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼不傅,長吁一口氣:“原來是場噩夢啊……” “哼旅掂!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起访娶,我...
    開封第一講書人閱讀 39,230評論 0 276
  • 序言:老撾萬榮一對情侶失蹤商虐,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體秘车,經(jīng)...
    沈念sama閱讀 45,680評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡典勇,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,873評論 3 336
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了鲫尊。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片痴柔。...
    茶點故事閱讀 39,991評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖疫向,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情豪嚎,我是刑警寧澤搔驼,帶...
    沈念sama閱讀 35,706評論 5 346
  • 正文 年R本政府宣布,位于F島的核電站侈询,受9級特大地震影響舌涨,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜扔字,卻給世界環(huán)境...
    茶點故事閱讀 41,329評論 3 330
  • 文/蒙蒙 一囊嘉、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧革为,春花似錦扭粱、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,910評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至抛虏,卻和暖如春博其,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背迂猴。 一陣腳步聲響...
    開封第一講書人閱讀 33,038評論 1 270
  • 我被黑心中介騙來泰國打工慕淡, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人沸毁。 一個月前我還...
    沈念sama閱讀 48,158評論 3 370
  • 正文 我出身青樓峰髓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親以清。 傳聞我的和親對象是個殘疾皇子儿普,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,941評論 2 355

推薦閱讀更多精彩內(nèi)容