Hadoop偽分布式安裝

安裝環(huán)境(VMware12? ?, centos6.4)

1.安裝JDK

檢測(cè)已經(jīng)安裝jdk? ?: rpm -qa|grep jdk??

查到什么刪什么:rpm -e --nodeps? ?java-1.6.0-openjdk-1.6.0.0-1.45.1.11.1.el6.i686

--------------------------------------------------------------分割線(xiàn)--------------------------------------------------------------------

-①-- CentOS下安裝JDK8

安裝JDK8

1.去http://www.Oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html中下載JDK的安裝文件jdk-8u60-linux-x64.tar.gz糖声。

2.新建/usr/java文件夾斟览,將jdk-8u60-linux-x64.tar.gz放到該文件夾下防嗡,并切換到/usr/java目錄下德澈。

3.執(zhí)行命令tar zxvf jdk-8u60-linux-x64.tar.gz進(jìn)行解壓縮齐蔽,解壓后/usr/java目錄下多了jdk1.8.0_60文件夾劫流。

4.通過(guò)以上步驟踪危,JDK安裝完畢憋活。下面開(kāi)始配置環(huán)境變量堕虹。

配置環(huán)境變量

1.執(zhí)行命令vim /etc/profile編輯profile文件卧晓。

2.在/etc/profile底部加入如下內(nèi)容:

JAVA_HOME=/usr/java/jdk1.8.0_60

PATH=$JAVA_HOME/bin:$PATH

CLASSPATH=$JAVA_HOME/jre/lib/ext:$JAVA_HOME/lib/tools.jar

export PATH JAVA_HOME CLASSPATH

3.以上,環(huán)境變量配置完成赴捞。需要注意的是逼裆,PATH在配置的時(shí)候,一定要把$JAVA_HOME/bin放在前面赦政,不然使用java命令時(shí)胜宇,系統(tǒng)會(huì)找到以前 的java,再不往下找了恢着。這樣java這個(gè)可執(zhí)行文件運(yùn)行的目錄其實(shí)不在$JAVA_HOME/bin下桐愉,而在其它目錄下,會(huì)造成很大的問(wèn)題掰派。

4.執(zhí)行命令source /etc/profile讓profile文件立即生效从诲。

命令測(cè)試

1.使用javac命令,不會(huì)出現(xiàn)command not found錯(cuò)誤靡羡。

2.使用java -version系洛,出現(xiàn)版本為java version "1.8.0_60"俊性。

3.看看自己的配置是否都正確。

echo $JAVA_HOME

echo $CLASSPATH

echo $PATH

-----------------------------------------------------------------------分割線(xiàn)----------------------------------------------------------------

tar -zvxf jdk-7u79-linux-x64.tar.gz -C ~/app:將jdk解壓到根目錄下的app文件夾之下描扯。

②配置環(huán)境變量:

--cd ~/app /jdk1.7.0_79

--pwd? 得到目錄/home/hadoop/app/jdk1.7.0_79

--cd? 回到原來(lái)目錄

--vi ~/.bash_profile? ?寫(xiě)入環(huán)境變量??

if [ -f ~/.bashrc ]; then

. ~/.bashrc

fi

# User specific environment and startup programs

export JAVA_HOME=/home/hadoop/app/jdk1.7.0_79

export PATH=$JAVA_HOME/bin:$PATH

export SCALA_HOME=/home/hadoop/app/scala-2.11.8

export PATH=$SCALA_HOME/bin:$PATH

export MAVEN_HOME=/home/hadoop/app/apache-maven-3.3.9

export PATH=$MAVEN_HOME/bin:$PATH

--source ~/.bash_profile? 使環(huán)境變量生效

echo $JAVA_HOME查看環(huán)境變量


jdk刪除

2.安裝ssh

---sudo? yum install ssh

---ssh-keygen? -t? rsa

----cp ~/.ssh/id_rsa.pub? ~/.ssh/authorized_keys

測(cè)試:

?ssh -localhost? ?注意:一般情況下localhost是127.0.0.1磅废;如果localhost不行就用ip地址

3.安裝hadoop:

第一步:到cdh網(wǎng)站上下載并解壓文件到根目錄下面的app目錄下


bin:中是客戶(hù)端

第二步:修改配置文件,配置java路徑

/home/hadoop/app/hadoop-2.6.0-cdh5.7.0/etc/hadoop修改hadoop-env.sh文件 中的路徑為下列路徑:

[hadoop@hadoop000 Desktop]$ echo $JAVA_HOME

/home/hadoop/app/jdk1.7.0_79


4.配置xml文檔 core-site.xml? ?荆烈; hdfs-site.xml拯勉; slaves


5.啟動(dòng)hdfs

格式化文件系統(tǒng)(僅第一次執(zhí)行,不可重復(fù))bin/hadoop namnode -format? (過(guò)時(shí)的方法憔购,請(qǐng)使用hdfs/hadoop namnode -format)



啟動(dòng)hdfs:sbin/start-dfs.sh

驗(yàn)證是否啟動(dòng)成功:①jps? ? ② 虛擬機(jī)的瀏覽器驗(yàn)證http://hadoop000:50070? ?【主機(jī)名+端口號(hào)】


6.停止hdfs

sbin/stop-dfs.sh

打開(kāi)hdfs報(bào)錯(cuò)

報(bào)錯(cuò)解決:ip a? ? 宫峦;? ?cat /etc/hosts? ? ?修改host? ip地址和ip a 中出現(xiàn)的一樣



Hadoop shell 操作

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市玫鸟,隨后出現(xiàn)的幾起案子导绷,更是在濱河造成了極大的恐慌,老刑警劉巖屎飘,帶你破解...
    沈念sama閱讀 206,126評(píng)論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件妥曲,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡钦购,警方通過(guò)查閱死者的電腦和手機(jī)檐盟,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,254評(píng)論 2 382
  • 文/潘曉璐 我一進(jìn)店門(mén),熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)押桃,“玉大人葵萎,你說(shuō)我怎么就攤上這事〕” “怎么了羡忘?”我有些...
    開(kāi)封第一講書(shū)人閱讀 152,445評(píng)論 0 341
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)磕昼。 經(jīng)常有香客問(wèn)我卷雕,道長(zhǎng),這世上最難降的妖魔是什么票从? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 55,185評(píng)論 1 278
  • 正文 為了忘掉前任漫雕,我火速辦了婚禮,結(jié)果婚禮上纫骑,老公的妹妹穿的比我還像新娘蝎亚。我一直安慰自己,他們只是感情好先馆,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,178評(píng)論 5 371
  • 文/花漫 我一把揭開(kāi)白布发框。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪梅惯。 梳的紋絲不亂的頭發(fā)上宪拥,一...
    開(kāi)封第一講書(shū)人閱讀 48,970評(píng)論 1 284
  • 那天,我揣著相機(jī)與錄音铣减,去河邊找鬼她君。 笑死,一個(gè)胖子當(dāng)著我的面吹牛葫哗,可吹牛的內(nèi)容都是我干的缔刹。 我是一名探鬼主播,決...
    沈念sama閱讀 38,276評(píng)論 3 399
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼劣针,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼校镐!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起捺典,我...
    開(kāi)封第一講書(shū)人閱讀 36,927評(píng)論 0 259
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤鸟廓,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后襟己,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體引谜,經(jīng)...
    沈念sama閱讀 43,400評(píng)論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 35,883評(píng)論 2 323
  • 正文 我和宋清朗相戀三年擎浴,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了员咽。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 37,997評(píng)論 1 333
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡退客,死狀恐怖骏融,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情萌狂,我是刑警寧澤,帶...
    沈念sama閱讀 33,646評(píng)論 4 322
  • 正文 年R本政府宣布怀泊,位于F島的核電站茫藏,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏霹琼。R本人自食惡果不足惜务傲,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,213評(píng)論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望枣申。 院中可真熱鬧售葡,春花似錦、人聲如沸忠藤。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 30,204評(píng)論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)模孩。三九已至尖阔,卻和暖如春贮缅,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背介却。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 31,423評(píng)論 1 260
  • 我被黑心中介騙來(lái)泰國(guó)打工谴供, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人齿坷。 一個(gè)月前我還...
    沈念sama閱讀 45,423評(píng)論 2 352
  • 正文 我出身青樓桂肌,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親永淌。 傳聞我的和親對(duì)象是個(gè)殘疾皇子轴或,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,722評(píng)論 2 345

推薦閱讀更多精彩內(nèi)容