centos6.10單機Hadoop

系統(tǒng):centos 6.10
jdk:jdk-8u281-linux-x64.tar.gz
hadoop: hadoop-2.10.1.tar.gz
http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-2.10.1/
1翅萤、jdk和hadoop安裝包復制解壓到服務器着倾,配置環(huán)境變量
cd /root
vim .bashrc

export JAVA_HOME=/root/hd/jdk1.8.0_281
export JRE_HOME=${JAVA_HOME}/jre
export CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib
export PATH=${JAVA_HOME}/bin:$PATH

export HADOOP_HOME=/root/hd/hadoop-2.10.1
export PATH=$HADOOP_HOME/bin:$PATH

image.png

修改完環(huán)境變量執(zhí)行:source .bashrc
使用命令查看是否配置OK:java -version其爵,hadoop version
2姑子、修改Hadoop配置文件
cd /root/hd/hadoop-2.10.1/etc/hadoop
image.png

2.1、vim core-site.xml

<configuration>
  <property>
    <name>fs.defaultFS</name>
    <value>hdfs://192.168.2.11:9000</value>
  </property>
  <property>
    <name>hadoop.tmp.dir</name>
    <value>/root/hd/hadoop-2.10.1/tmp</value>
  </property>
  <property>
    <name>hadoop.native.lib</name>
    <value>false</value>
    <description>Should native hadoop libraries, if present, be used.</description>
  </property>
</configuration>

image.png

2.2替劈、vim hadoop-env.sh
image.png

2.3棒拂、vim hdfs-site.xml

<configuration>
  <property>
    <name>dfs.replication</name>
    <value>1</value>
  </property>
  <property>
    <name>dfs.secondary.http.address</name>
    <value>192.168.2.11:50090</value>
  </property>
</configuration>

image.png

2.4、cp mapred-site.xml.template mapred-site.xml 蛛蒙,vim mapred-site.xml

<configuration>
  <property>
    <name>mapreduce.framework.name</name>
    <value>yarn</value>
  </property>
</configuration>

image.png

2.5、vim yarn-site.xml

<property>
    <name>yarn.resourcemanager.hostname</name>
    <value>192.168.2.11</value>
  </property>
  <property>
    <name>yarn.nodemanager.aux-services</name>
    <value>mapreduce_shuffle</value>
  </property>

image.png

3恨锚、啟動Hadoop
3.1宇驾、格式化hadoop文件
cd /root/hd/hadoop-2.10.1/sbin倍靡,hadoop namenode -format
image.png

3.2猴伶、啟動服務
./start-all.sh中途會讓輸幾次密碼
3.3塌西、查看服務是否啟動
jps
image.png

訪問:http://192.168.2.11:50070/
image.png

最后編輯于
?著作權歸作者所有,轉載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末他挎,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子捡需,更是在濱河造成了極大的恐慌办桨,老刑警劉巖,帶你破解...
    沈念sama閱讀 206,214評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件站辉,死亡現(xiàn)場離奇詭異呢撞,居然都是意外死亡损姜,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,307評論 2 382
  • 文/潘曉璐 我一進店門殊霞,熙熙樓的掌柜王于貴愁眉苦臉地迎上來摧阅,“玉大人,你說我怎么就攤上這事绷蹲“艟恚” “怎么了?”我有些...
    開封第一講書人閱讀 152,543評論 0 341
  • 文/不壞的土叔 我叫張陵祝钢,是天一觀的道長比规。 經(jīng)常有香客問我,道長拦英,這世上最難降的妖魔是什么蜒什? 我笑而不...
    開封第一講書人閱讀 55,221評論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮疤估,結果婚禮上吃谣,老公的妹妹穿的比我還像新娘。我一直安慰自己做裙,他們只是感情好岗憋,可當我...
    茶點故事閱讀 64,224評論 5 371
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著锚贱,像睡著了一般仔戈。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上拧廊,一...
    開封第一講書人閱讀 49,007評論 1 284
  • 那天监徘,我揣著相機與錄音,去河邊找鬼吧碾。 笑死凰盔,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的倦春。 我是一名探鬼主播户敬,決...
    沈念sama閱讀 38,313評論 3 399
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼睁本!你這毒婦竟也來了尿庐?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 36,956評論 0 259
  • 序言:老撾萬榮一對情侶失蹤呢堰,失蹤者是張志新(化名)和其女友劉穎抄瑟,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體枉疼,經(jīng)...
    沈念sama閱讀 43,441評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡皮假,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 35,925評論 2 323
  • 正文 我和宋清朗相戀三年鞋拟,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片惹资。...
    茶點故事閱讀 38,018評論 1 333
  • 序言:一個原本活蹦亂跳的男人離奇死亡严卖,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出布轿,到底是詐尸還是另有隱情哮笆,我是刑警寧澤,帶...
    沈念sama閱讀 33,685評論 4 322
  • 正文 年R本政府宣布汰扭,位于F島的核電站稠肘,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏萝毛。R本人自食惡果不足惜项阴,卻給世界環(huán)境...
    茶點故事閱讀 39,234評論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望笆包。 院中可真熱鬧环揽,春花似錦、人聲如沸庵佣。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,240評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽巴粪。三九已至通今,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間肛根,已是汗流浹背辫塌。 一陣腳步聲響...
    開封第一講書人閱讀 31,464評論 1 261
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留派哲,地道東北人臼氨。 一個月前我還...
    沈念sama閱讀 45,467評論 2 352
  • 正文 我出身青樓,卻偏偏與公主長得像芭届,于是被迫代替她去往敵國和親储矩。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 42,762評論 2 345

推薦閱讀更多精彩內(nèi)容

  • 環(huán)境 一臺ubuntu 14.04虛擬機喉脖。 Hadoop版本:2.6.0椰苟。 增加用戶 為了隔離Hadoop和其它軟...
    doc001閱讀 1,800評論 1 9
  • 前言 實驗室項目需要部署一個hadoop集群抑月,雖然自己之前用虛擬機也搭建過偽分布式的hadoop集群树叽,但那個時候也...
    復旦猿閱讀 5,826評論 0 5
  • 第一步 安裝hadoop-common-2.2.0-bin-master 1.下載地址:https://githu...
    cubotudo閱讀 1,275評論 0 1
  • HDFS文件系統(tǒng) HDFS是一個分布式文件系統(tǒng),采用分而治之的設計思想谦絮,將大文件题诵、大批量文件洁仗,分布式存放在大量服務...
    spilledyear閱讀 1,379評論 0 0
  • 推薦指數(shù): 6.0 書籍主旨關鍵詞:特權、焦點性锭、注意力赠潦、語言聯(lián)想、情景聯(lián)想 觀點: 1.統(tǒng)計學現(xiàn)在叫數(shù)據(jù)分析草冈,社會...
    Jenaral閱讀 5,701評論 0 5