Hadoop的namenode做NFS災(zāi)備

? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? 天津九安醫(yī)療電子--吳偉?

1.首先選定一臺災(zāi)備機器作為NFS服務(wù)器

(1)安裝如下:

apt-get install nfs-kernel-server? (NFS服務(wù)器,提供nfs服務(wù))

apt-get install portmap (端口映射服務(wù)器捍岳,主要是RPC程序號轉(zhuǎn)化為Internet的端口號)

(2)在/etc/exports文件中 設(shè)置需要掛載為nfs服務(wù)的目錄

注: /home/hadoop/name? 表示掛載的目錄

*表示任意IP牵素,這里大家可以根據(jù)需求配置簸州,如10.10.*.*

(rw,sync,no_subtree_check)這里指掛載目錄的相關(guān)設(shè)置(詳細描述見文后備注) ,此處因為要提供給namenode寫權(quán)限,故應(yīng)該配置為rw

(3)重新啟動NFS服務(wù)(使exports修改生效哮奇,當(dāng)然還有另外的命令 這里就不再多侃了)

sudo? /etc/init.d/nfs-kernel-server restart? 或者 sudo service nfs-kernel-server restart,? 另外start西壮,stop,status就不詳述了

至于portmap的相關(guān)命令同上

(4)查看掛載目錄是否成功

showmount -e

2.? 在namenode上安裝NFS客服端

(1)apt-get install nfs-common (NFS客戶端,訪問nfs)

(2)掛載NFS目錄到本地

mount? ? ? IP:/home/hadoop/name? /home/hadoop/nfs

掛載命令? ? NFS服務(wù)的IP及路徑? ? ? ? ? ? 本地目錄(必須為已存在的目錄)

umount? /home/hadoop/nfs? 卸載目錄? 如果出現(xiàn)device is busy錯誤? 可以另加 -l? 參數(shù)強制卸載

3.? 配置namenode下hdfs-site.xml文件的dfs.name.dir配置里加上掛載的路徑/home/hadoop/nfs

上傳中...

4.? 重啟hadoop

然后去NFS服務(wù)器 /home/hadoop/name? 目錄下查看是否已經(jīng)有namenode的fsimage等文件

有則證明配置成功张咳。

如出現(xiàn)不能訪問指定目錄(/home/hadoop/nfs)的錯誤帝洪,請檢查NFS服務(wù)器端文件權(quán)限問題是否為只可讀(ro)

備注:有關(guān)NFS配置還有不明的請去參考網(wǎng)上其他文章,本文重點不在介紹配置NFS脚猾,故不作更多的描述葱峡。

以下是掛載文件的一些配置參數(shù)及含義,僅供參考

ro? ? ? ? ? ? ? ? ? ? ? 只讀訪問

rw? ? ? ? ? ? ? ? ? ? ? 讀寫訪問

sync? ? ? ? ? ? ? ? ? ? 所有數(shù)據(jù)在請求時寫入共享

async? ? ? ? ? ? ? ? ? NFS在寫入數(shù)據(jù)前可以相應(yīng)請求

secure? ? ? ? ? ? ? ? ? NFS通過1024以下的安全TCP/IP端口發(fā)送

insecure? ? ? ? ? ? ? ? NFS通過1024以上的端口發(fā)送

wdelay? ? ? ? ? ? ? ? ? 如果多個用戶要寫入NFS目錄龙助,則歸組寫入(默認)

no_wdelay? ? ? ? ? ? ? 如果多個用戶要寫入NFS目錄砰奕,則立即寫入,當(dāng)使用async時提鸟,無需此設(shè)置军援。

hide? ? ? ? ? ? ? ? ? ? 在NFS共享目錄中不共享其子目錄

no_hide? ? ? ? ? ? ? ? 共享NFS目錄的子目錄

subtree_check? ? ? ? ? 如果共享/usr/bin之類的子目錄時,強制NFS檢查父目錄的權(quán)限(默認)

no_subtree_check? ? ? ? 和上面相對称勋,不檢查父目錄權(quán)限

all_squash? ? ? ? ? ? ? 共享文件的UID和GID映射匿名用戶anonymous盖溺,適合公用目錄。

no_all_squash? ? ? ? ? 保留共享文件的UID和GID(默認)

root_squash? ? ? ? ? ? root用戶的所有請求映射成如anonymous用戶一樣的權(quán)限(默認)

no_root_squas? ? ? ? ? root用戶具有根目錄的完全管理訪問權(quán)限

anonuid=xxx? ? ? ? ? ? 指定NFS服務(wù)器/etc/passwd文件中匿名用戶的UID

anongid=xxx? ? ? ? ? ? 指定NFS服務(wù)器/etc/passwd文件中匿名用戶的GID

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末铣缠,一起剝皮案震驚了整個濱河市烘嘱,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌蝗蛙,老刑警劉巖蝇庭,帶你破解...
    沈念sama閱讀 206,482評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異捡硅,居然都是意外死亡哮内,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,377評論 2 382
  • 文/潘曉璐 我一進店門壮韭,熙熙樓的掌柜王于貴愁眉苦臉地迎上來北发,“玉大人,你說我怎么就攤上這事喷屋×詹Γ” “怎么了?”我有些...
    開封第一講書人閱讀 152,762評論 0 342
  • 文/不壞的土叔 我叫張陵屯曹,是天一觀的道長狱庇。 經(jīng)常有香客問我惊畏,道長,這世上最難降的妖魔是什么密任? 我笑而不...
    開封第一講書人閱讀 55,273評論 1 279
  • 正文 為了忘掉前任颜启,我火速辦了婚禮,結(jié)果婚禮上浪讳,老公的妹妹穿的比我還像新娘缰盏。我一直安慰自己,他們只是感情好淹遵,可當(dāng)我...
    茶點故事閱讀 64,289評論 5 373
  • 文/花漫 我一把揭開白布乳规。 她就那樣靜靜地躺著,像睡著了一般合呐。 火紅的嫁衣襯著肌膚如雪暮的。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 49,046評論 1 285
  • 那天淌实,我揣著相機與錄音冻辩,去河邊找鬼。 笑死拆祈,一個胖子當(dāng)著我的面吹牛恨闪,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播放坏,決...
    沈念sama閱讀 38,351評論 3 400
  • 文/蒼蘭香墨 我猛地睜開眼咙咽,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了淤年?” 一聲冷哼從身側(cè)響起钧敞,我...
    開封第一講書人閱讀 36,988評論 0 259
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎麸粮,沒想到半個月后溉苛,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,476評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡弄诲,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 35,948評論 2 324
  • 正文 我和宋清朗相戀三年愚战,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片齐遵。...
    茶點故事閱讀 38,064評論 1 333
  • 序言:一個原本活蹦亂跳的男人離奇死亡寂玲,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出梗摇,到底是詐尸還是另有隱情拓哟,我是刑警寧澤,帶...
    沈念sama閱讀 33,712評論 4 323
  • 正文 年R本政府宣布留美,位于F島的核電站彰檬,受9級特大地震影響伸刃,放射性物質(zhì)發(fā)生泄漏谎砾。R本人自食惡果不足惜逢倍,卻給世界環(huán)境...
    茶點故事閱讀 39,261評論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望景图。 院中可真熱鬧较雕,春花似錦、人聲如沸挚币。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,264評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽妆毕。三九已至慎玖,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間笛粘,已是汗流浹背趁怔。 一陣腳步聲響...
    開封第一講書人閱讀 31,486評論 1 262
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留薪前,地道東北人润努。 一個月前我還...
    沈念sama閱讀 45,511評論 2 354
  • 正文 我出身青樓,卻偏偏與公主長得像示括,于是被迫代替她去往敵國和親铺浇。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 42,802評論 2 345

推薦閱讀更多精彩內(nèi)容