Hadoop3.2 集群搭建

> Hadoop3.2 集群新版本的搭建詳細(xì)講解過程烘跺,從下面第一張官方的圖來看,最新版是3.2耳奕,所以大豬將使用3.2的版本來演示襟沮,過程中遇到的坑留給自己,把路留給你們跪腹,IT之路還有大豬褂删。

![](https://upload-images.jianshu.io/upload_images/9028759-c4659c34208ffcde.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

![](https://upload-images.jianshu.io/upload_images/9028759-cb9430d57d76ca64.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

大豬 為了把文章壓縮極簡方便小伙伴閱讀,將使用root帳號(hào)進(jìn)行所有操作冲茸。

1. 準(zhǔn)備兩臺(tái)主機(jī)`10.211.55.11`屯阀、`10.211.55.12`

2. 對應(yīng)的hostname為`m1.example.com`、`m2.example.com`

具體命令操作如下

![](https://upload-images.jianshu.io/upload_images/9028759-b82786e88b8504d1.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

3. 主機(jī)免密鑰登錄

![](https://upload-images.jianshu.io/upload_images/9028759-ca321d58d2247fcd.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

4. 同步hosts

![](https://upload-images.jianshu.io/upload_images/9028759-ebc6270f0359b844.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

![](https://upload-images.jianshu.io/upload_images/9028759-328e3846ba699265.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

1. 下載 [jdk1.8](https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html)

![](https://upload-images.jianshu.io/upload_images/9028759-67b4138ad2dcd864.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

2. 配置Java環(huán)境

![](https://upload-images.jianshu.io/upload_images/9028759-bc6f7889946acdb4.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

3. 環(huán)境變量生效 *source /etc/profile*

![](https://upload-images.jianshu.io/upload_images/9028759-ef8b933763328942.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

1. 兩臺(tái)主機(jī)創(chuàng)建好hadoop的文件夾

![](https://upload-images.jianshu.io/upload_images/9028759-ee5a56d1fcbc4c67.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

2.? 環(huán)境配置 [hadoop-3.2.0.tar.gz](https://www.apache.org/dyn/closer.cgi/hadoop/common/hadoop-3.2.0/hadoop-3.2.0.tar.gz)

![](https://upload-images.jianshu.io/upload_images/9028759-748d816c7cc2d3ba.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

3. 參數(shù)配置

運(yùn)行用戶操作轴术,添加如下幾句到 */soft/hadoop/etc/hadoop/hadoop-env.sh*

![](https://upload-images.jianshu.io/upload_images/9028759-5e5c28655ec89441.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

4. 環(huán)境變量生效 *source /etc/profile*

5. hadoop 配置文件

core-site.xml 配置

![](https://upload-images.jianshu.io/upload_images/9028759-9535bbf3952403b7.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

hdfs-site.xml 配置

![](https://upload-images.jianshu.io/upload_images/9028759-e5aa0a5eb5dcc97d.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

yarn-site.xml 配置

![](https://upload-images.jianshu.io/upload_images/9028759-95af37bfb6fd32ca.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

mapred-site.xml 配置

![](https://upload-images.jianshu.io/upload_images/9028759-a41a9c5008674032.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

6. 格式化name文件夾? *hadoop namenode -format*

7. 啟動(dòng) *start-all.sh*

成功結(jié)果如下

![](https://upload-images.jianshu.io/upload_images/9028759-de5c809303a4c8b8.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

8. 訪問 [http://m1.example.com:8088/cluster](http://m1.example.com:8088/cluster)

![](https://upload-images.jianshu.io/upload_images/9028759-53feb49c8046edb8.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

心明眼亮的你难衰、從此刻開始。

![](https://upload-images.jianshu.io/upload_images/9028759-7586fee586f2075b.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

![](https://upload-images.jianshu.io/upload_images/9028759-07315bb8dadcd082.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末逗栽,一起剝皮案震驚了整個(gè)濱河市盖袭,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖鳄虱,帶你破解...
    沈念sama閱讀 218,204評論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件弟塞,死亡現(xiàn)場離奇詭異,居然都是意外死亡拙已,警方通過查閱死者的電腦和手機(jī)宣肚,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,091評論 3 395
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來悠栓,“玉大人霉涨,你說我怎么就攤上這事〔咽剩” “怎么了笙瑟?”我有些...
    開封第一講書人閱讀 164,548評論 0 354
  • 文/不壞的土叔 我叫張陵,是天一觀的道長癞志。 經(jīng)常有香客問我往枷,道長,這世上最難降的妖魔是什么凄杯? 我笑而不...
    開封第一講書人閱讀 58,657評論 1 293
  • 正文 為了忘掉前任错洁,我火速辦了婚禮,結(jié)果婚禮上戒突,老公的妹妹穿的比我還像新娘屯碴。我一直安慰自己,他們只是感情好膊存,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,689評論 6 392
  • 文/花漫 我一把揭開白布导而。 她就那樣靜靜地躺著,像睡著了一般隔崎。 火紅的嫁衣襯著肌膚如雪今艺。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,554評論 1 305
  • 那天爵卒,我揣著相機(jī)與錄音虚缎,去河邊找鬼。 笑死钓株,一個(gè)胖子當(dāng)著我的面吹牛实牡,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播享幽,決...
    沈念sama閱讀 40,302評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼铲掐,長吁一口氣:“原來是場噩夢啊……” “哼拾弃!你這毒婦竟也來了值桩?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,216評論 0 276
  • 序言:老撾萬榮一對情侶失蹤豪椿,失蹤者是張志新(化名)和其女友劉穎奔坟,沒想到半個(gè)月后携栋,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,661評論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡咳秉,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,851評論 3 336
  • 正文 我和宋清朗相戀三年婉支,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片澜建。...
    茶點(diǎn)故事閱讀 39,977評論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡向挖,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出炕舵,到底是詐尸還是另有隱情何之,我是刑警寧澤,帶...
    沈念sama閱讀 35,697評論 5 347
  • 正文 年R本政府宣布咽筋,位于F島的核電站溶推,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏奸攻。R本人自食惡果不足惜蒜危,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,306評論 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望睹耐。 院中可真熱鬧辐赞,春花似錦、人聲如沸硝训。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,898評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽捎迫。三九已至晃酒,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間窄绒,已是汗流浹背贝次。 一陣腳步聲響...
    開封第一講書人閱讀 33,019評論 1 270
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留彰导,地道東北人蛔翅。 一個(gè)月前我還...
    沈念sama閱讀 48,138評論 3 370
  • 正文 我出身青樓,卻偏偏與公主長得像位谋,于是被迫代替她去往敵國和親山析。 傳聞我的和親對象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,927評論 2 355

推薦閱讀更多精彩內(nèi)容