Linux下的Hadoop安裝

Hadoop的安裝:

1.sudo cp hadoop-2.6.0-cdh5.6.0.tar.gz /usr

將Hadoop安裝包移到usr下


將Hadoop安裝包移到usr下
2.sudo tar zxvf hadoop-2.6.0-cdh5.6.0.tar.gz

解壓縮


解壓縮
3.sudo chown -R hadoop:hadoop hadoop-2.6.0-cdh5.6.0

修改所有者為hadoop


修改所有者
4.sudo mv hadoop-2.6.0-cdh5.6.0 hadoop

修改名字為hadoop


修改名字
5.vi ~/.bashrc

修改配置文件
將以下內(nèi)容寫在最后一行

export HADOOP_INSTALL=/usr/hadoop
export PATH=PATH:HADOOP_INSTALL/bin
export PATH=PATH:HADOOP_INSTALL/sbin
export HADOOP_MAPRED_HOME=HADOOP_INSTALL export HADOOP_COMMON_HOME=HADOOP_INSTALL
export HADOOP_HDFS_HOME=HADOOP_INSTALL export YARN_HOME=HADOOP_INSTALL
export HADOOP_COMMON_LIB_NATIVE_DIR=HADOOP_INSTALL/lib/native export HADOOP_OPTS="-Djava.library.path=HADOOP_INSTALL/lib"

寫入

寫完后:wq!保存退出編輯模式

6.source ~/.bashrc

重新載入配置文件


重新載入
7.cd /hadoop/etc/hadoop/

進入etc下的hadoop目錄下


進入目錄
8.vi hadoop-env.sh

配置hadoop-env.sh文件內(nèi)容


注釋掉

將上面這句話前面加#注釋掉


加入

在后面加上如下語句

export JAVA_HOME=/usr/jdk18
export HADOOP_PREFIX=/usr/hadoop

export HADOOP_OPTS="-Djava.library.path=HADOOP_PREFIX/lib:HADOOP_PREFIX/lib/nativ"

后保存退出

9.vi core-site.xml

打開這個文件


打開文件

加入如下語句:

<property>
<name>hadoop.tmp.dir</name>
<value>/usr/hadoop/tmp</value>
<description>Abase?for?other temporary directories.
</description>
</property>
<property>
<name>fs.defaultFS</name>
<value>hdfs://localhost:9000</value>
</property>

加入后
10.cp mapred-site.xml.template mapred-site.xm

將mapred-site.xml.template文件復(fù)制一份名為mapred-site.xml的文件
修改mapred-site.xml文件


復(fù)制

打開文件

加入以下語句:

<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>

添加后
11.vi yarn-site.xml

打開文件


打開

加入以下語句

<property>
<name>yarn.nodemanager.aux-services</name>
<value>mapreduce_shuffle</value>
</property>

修改
12.vi hdfs-site.xml

進入文件
進入

添加以下內(nèi)容:

<property>
<name>dfs.replication</name>
<value>3</value>
</property>
<property>
<name>dfs.namenode.name.dir</name>
<value>file:/usr/hadoop/dfs/name</value>
</property>
<property>
<name>dfs.datanode.data.dir</name>
<value>file:/usr/hadoop/dfs/data</value>
</property>

修改后
13. ./bin/hdfs namenode -format

后退兩個目錄格式化


格式化

格式化成功
14. ./sbin/start-all.sh

啟動Hadoop用戶命令


啟動
過程
15 jps

查看進程


六個進程

如果顯示6個進程則說明配置成功

16 http://localhost:50070/

把localhost換成自己的IP地址查看虛擬機狀態(tài)
(此文章僅作為個人學(xué)習(xí)筆記使用,如有錯誤歡迎指正~)

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子奇昙,更是在濱河造成了極大的恐慌,老刑警劉巖坡贺,帶你破解...
    沈念sama閱讀 217,826評論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件旺矾,死亡現(xiàn)場離奇詭異片任,居然都是意外死亡器贩,警方通過查閱死者的電腦和手機颅夺,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,968評論 3 395
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來蛹稍,“玉大人吧黄,你說我怎么就攤上這事∷艚悖” “怎么了拗慨?”我有些...
    開封第一講書人閱讀 164,234評論 0 354
  • 文/不壞的土叔 我叫張陵,是天一觀的道長奉芦。 經(jīng)常有香客問我赵抢,道長,這世上最難降的妖魔是什么仗阅? 我笑而不...
    開封第一講書人閱讀 58,562評論 1 293
  • 正文 為了忘掉前任昌讲,我火速辦了婚禮,結(jié)果婚禮上减噪,老公的妹妹穿的比我還像新娘。我一直安慰自己车吹,他們只是感情好筹裕,可當我...
    茶點故事閱讀 67,611評論 6 392
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著窄驹,像睡著了一般朝卒。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上乐埠,一...
    開封第一講書人閱讀 51,482評論 1 302
  • 那天抗斤,我揣著相機與錄音,去河邊找鬼丈咐。 笑死瑞眼,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的棵逊。 我是一名探鬼主播伤疙,決...
    沈念sama閱讀 40,271評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了徒像?” 一聲冷哼從身側(cè)響起黍特,我...
    開封第一講書人閱讀 39,166評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎锯蛀,沒想到半個月后灭衷,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,608評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡旁涤,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,814評論 3 336
  • 正文 我和宋清朗相戀三年今布,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片拭抬。...
    茶點故事閱讀 39,926評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡部默,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出造虎,到底是詐尸還是另有隱情傅蹂,我是刑警寧澤,帶...
    沈念sama閱讀 35,644評論 5 346
  • 正文 年R本政府宣布算凿,位于F島的核電站份蝴,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏氓轰。R本人自食惡果不足惜婚夫,卻給世界環(huán)境...
    茶點故事閱讀 41,249評論 3 329
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望署鸡。 院中可真熱鬧案糙,春花似錦、人聲如沸靴庆。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,866評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽炉抒。三九已至奢讨,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間焰薄,已是汗流浹背拿诸。 一陣腳步聲響...
    開封第一講書人閱讀 32,991評論 1 269
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留塞茅,地道東北人亩码。 一個月前我還...
    沈念sama閱讀 48,063評論 3 370
  • 正文 我出身青樓,卻偏偏與公主長得像凡桥,于是被迫代替她去往敵國和親蟀伸。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 44,871評論 2 354

推薦閱讀更多精彩內(nèi)容

  • 一、系統(tǒng)參數(shù)配置優(yōu)化 1啊掏、系統(tǒng)內(nèi)核參數(shù)優(yōu)化配置 修改文件/etc/sysctl.conf蠢络,添加如下配置,然后執(zhí)行s...
    張偉科閱讀 3,750評論 0 14
  • 1.Hadoop 廣義:以hadoop軟件為主的生態(tài)圈 狹義:hadoop軟件 hadoop 1.x hdfs 存...
    一生逍遙一生閱讀 310評論 0 0
  • Linux第5課:安裝Hbase數(shù)據(jù)庫(一) 時間 2019-03-05下午3:30 主講張春志 地點 四樓電教室...
    啟蒙時代閱讀 1,436評論 0 0
  • 【原創(chuàng)】 不要挽留我 不要想念我 我是個在竹林里微閉雙目的小孩 我追著太陽跑 跑累了就會坐下來睡一覺 星期天是昨天...
    白蕙僑閱讀 229評論 2 3
  • 三年 始終不明確自己的職責(zé)是什么嗎迟蜜? 我到底在做怎樣的一份工作刹孔?我能收獲什么?這些都很模糊娜睛,沒有成就感髓霞,沒有奮斗力...
    Miya_young閱讀 311評論 0 0