????Hadoop是一個(gè)能夠?qū)Υ罅繑?shù)據(jù)進(jìn)行分布式處理的軟件框架跺涤， 以一種可靠、高效监透、可伸縮的方式進(jìn)行數(shù)據(jù)處理桶错。本文首先介紹一種偽分布式模式的安裝（雖然各個(gè)模塊是在各個(gè)進(jìn)程上分開運(yùn)行的，但是只是運(yùn)行在一個(gè)操作系統(tǒng)上的胀蛮，并不是真正的分布式）院刁，用于初步開發(fā)調(diào)試，體驗(yàn)Hadoop粪狼。
一退腥、虛擬機(jī)環(huán)境配置
????筆者使用的是虛擬機(jī)軟件是VMWare, 所安裝的操作系統(tǒng)是CentOS, 操作系統(tǒng)的光盤映像可以去官網(wǎng)下載（鏈接-CentOS Project）。光盤映像的安裝安裝操作提示一步步進(jìn)行即可鸳玩，網(wǎng)上也有很多步驟詳細(xì)的教程阅虫，不再贅述。
? ? 操作系統(tǒng)安裝完畢之后不跟，就可以進(jìn)行相關(guān)配置啦!
? ? 首先查看虛擬機(jī)的IP地址颓帝，在VMWare軟件的菜單欄選擇 編輯->虛擬網(wǎng)絡(luò)編輯器 就可以看到。
打開虛擬機(jī)后窝革，將ip地址設(shè)置為剛剛看到的固定的ip购城。點(diǎn)擊右上角的連接標(biāo)志，選擇有線設(shè)置進(jìn)行配置虐译。
ip地址的第四個(gè)字段可以自行設(shè)置瘪板，保證前面部分跟之前看到的本機(jī)ip相同即可，注意不能設(shè)置為0漆诽，至于網(wǎng)關(guān)侮攀，一般的網(wǎng)關(guān)是網(wǎng)段.1，在vmware中是.2地址厢拭。
這些配置好之后兰英，就可以正式的進(jìn)入Hadoop的配置啦~因?yàn)槭褂锰摂M機(jī)界面比較麻煩，筆者使用XShell連接虛擬機(jī)供鸠，通過命令行界面進(jìn)行操作畦贸，這也有利于以后開發(fā)項(xiàng)目時(shí)操作服務(wù)器的熟悉。連接方法和XShell軟件筆者放在另一篇博文里~（XShell及Xftp連接虛擬機(jī) - 簡書）
二楞捂、Hadoop環(huán)境配置
首先檢查虛擬機(jī)的網(wǎng)卡是否為開機(jī)啟動(dòng)薄坏，查看配置文件趋厉。（ens33是之前建立的有線連接的名字，不一定固定）
cat /etc/sysconfig/network-scripts/ifcfg-ens33
如果ONBOOT不是yes, 使用vim編輯修改這一配置文件即可胶坠。關(guān)于如何使用linux系統(tǒng)常用的命令不是本文的重點(diǎn)君账，不再贅述。
2.1 配置jdk
我們首先在用戶的根目錄下創(chuàng)建一個(gè)名為soft的文件夾涵但，將jdk的壓縮包通過xftp上傳到soft文件夾中杈绸。在centOS里默認(rèn)安裝了一個(gè)JDK帖蔓，是openJDK（開源版的）矮瘟。或者使用筆者提供的jdk塑娇。
鏈接：https://pan.baidu.com/s/1pcGcnn-a_YTOZB6FIR88mA 密碼：mojt
解壓文件
tar -zxvf jdk-8u65-linux-x64.tar.gz
解壓完成后澈侠，在hadoop用戶的根目錄有一個(gè)jdk1.8.0_65目錄
2.2? 配置環(huán)境變量
使用su命令切換到root用戶
使用vim修改/etc/profile文件，?在profile文件最后添加
JAVA_HOME=/home/hadoop/jdk1.8.0_65
export PATH=$PATH:$JAVA_HOME/bin
使用source命令把修改的環(huán)境變量生效埋酬，jdk配置就完成了哨啃。（此時(shí)可以在普通用戶下操作）
source etc/profile
2.3 配置Hadoop
首先需要將Hadoop壓縮包上傳到虛擬機(jī)上。方便起見写妥，我們?nèi)匀簧蟼鞯街皠?chuàng)建的soft文件夾拳球。這里提供一個(gè)Hadoop壓縮包的資源，大家也可以在網(wǎng)上自由下載珍特。
鏈接：https://pan.baidu.com/s/1VcUmWSTuHsIRlnvJYNhOaw 密碼：7ymn
上傳完成后同樣要進(jìn)行解壓祝峻，解壓完成在hadoop用戶的根目錄下有一個(gè)hadoop-2.6.0目錄
tar -zxvf hadoop-2.6.0.tar.gz
接著就需要使用vim修改配置文件hadoop-2.6.0/etc/hadoop/hadoop-env.sh， 注意這里JAVA_HOME的值是jdk在虛擬機(jī)上的解壓路徑扎筒，讀者可以根據(jù)自己虛擬機(jī)的情況自行設(shè)置
export JAVA_HOME=/home/hadoop/jdk1.8.0_65
然后繼續(xù)修改配置文件hadoop-2.6.0/etc/hadoop/core-site.xml莱找， 在<property></property>處貼如下代碼
<property>??????
????????<name>fs.defaultFS</name>??????
????????<value>hdfs://hadoop:9000</value>
</property>
保存之后，繼續(xù)修改hadoop-2.6.0/etc/hadoop/hdfs-site.xml嗜桌， 在<configuration></configuration>處添加下列代碼
<configuration>
????????<property> ???????
????????????????<name>dfs.replication</name> ??????
????????????????<value>1</value>
????????</property>
</configuration>
保存之后奥溺，繼續(xù)修改hadoop-2.6.0/etc/hadoop/mapred-site.xml文件，需要注意的是骨宠，此文件在hadoop文件夾中并不存在浮定，文件夾中只有一個(gè)名為mapred-site.xml.template的模板文件，我們需要首先使用cp命令將模板文件復(fù)制并重命名為我們的目標(biāo)文件
cp etc/hadoop/mapred-site.xml.template etc/hadoop/mapred-site.xml
復(fù)制完成之后层亿，我們在mapred-site.xml中進(jìn)行修改桦卒，在<configuration></configuration>處添加代碼
<configuration>
????????????<property> ???????
????????????????????<name>mapreduce.framework.name</name> ???????
????????????????????<value>yarn</value> ???
????????????</property>
</configuration>
保存之后，還需要修改hadoop-2.6.0/etc/hadoop/yarn-site.xml棕所，需要添加的代碼如下：
最后修改/etc/hosts文件（root用戶操作闸盔，在文件中添加一行： ip 主機(jī)名稱
如：192.168.44.199? hadoop
2.4 格式化HDFS
需要進(jìn)入hadoop解壓目錄，執(zhí)行如下操作：
bin/hdfs namenode -format
2.5? 啟動(dòng)集群
所有配置進(jìn)行到這里拢蛋，Hadoop的基本環(huán)境就配置完成了~接著就可以啟動(dòng)集群啦~
sbin/start-all.sh
同樣這一命令需要進(jìn)入到Hadoop的解壓目錄下才可以使用，需要輸入四次當(dāng)前用戶的密碼蔫巩。至于為什么要四次輸入當(dāng)前用戶密碼以及如何免密啟動(dòng)谆棱，可以參考筆者的另一篇博文~（SSH互信 - 簡書）
啟動(dòng)后，我們在命令行輸入jps來查看當(dāng)前的java進(jìn)程圆仔。如果之前的配置沒有出錯(cuò)垃瞧，我們會(huì)看到有以下輸出！除了jps進(jìn)程本身之外還應(yīng)有五個(gè)進(jìn)程坪郭，這些進(jìn)程的意義涉及到HDFS的結(jié)構(gòu)个从，可以參考 Hadoop分布式文件系統(tǒng)：架構(gòu)和設(shè)計(jì)
