1.查看是否安裝了Java
以后會運(yùn)行jar包济竹，肯定需要java的運(yùn)行環(huán)境痕檬。查看java版本,在terminal輸入：java -version

2.下載hadoop
地址：http://www.apache.org/dyn/closer.cgi/hadoop/common/hadoop-2.7.3/hadoop-2.7.3.tar.gz
本次下載中間版本，hadoop-2.7.3版本.用第二個鏡像下載速度較快

3.配置mac os 自身環(huán)境
這個主要是配置ssh環(huán)境送浊。先在terminal里面輸入ssh localhost
方法一：當(dāng)前用戶沒有權(quán)限梦谜。這個多半是系統(tǒng)為安全考慮，默認(rèn)設(shè)置的袭景。
更改設(shè)置如下：進(jìn)入系統(tǒng)偏好設(shè)置 --> 共享 --> 勾選遠(yuǎn)程登錄唁桩，并設(shè)置允許訪問：所有用戶。
再次輸入“ssh localhost"耸棒，再輸入密碼并確認(rèn)之后荒澡，可以看到ssh成功。

4.設(shè)置環(huán)境變量
①在terminal輸入：touch ~/.bash_profile
打開文件：vim ~/.bash_profile
export HADOOP_HOME=/Users/hadoop/hadoop-1.2.1(根據(jù)你自己的目錄進(jìn)行設(shè)定)
export PATH=$PATH:$HADOOP_HOME/bin
②保存文件
③設(shè)置變量立即生效命令：source ~/.bash_profile
④查看設(shè)置變量設(shè)置是否成功：hadoop version

5.配置Hadoop目錄下的文件
路徑下：hadoop-2.7.3/etc/hadoop
① Hadoop hadoop-env.sh 配置
JAVA_HOME={your java home directory}
HADOOP_PREFIX={your hadoop distribution directory}
說明：查看JAVA_HOME 命令：/usr/libexec/java_home# set to the root of your Hadoop
說明：HADOOP_PREFIX 你本地hadoop路徑 xxxx/hadoop-2.7.3/

② core-site.xml文件配置
<property>
<name>fs.defaultFS</name>
<value>hdfs://localhost:9000</value>
</property>

③ hdfs-site.xml
<property>
<name>dfs.replication</name>
<value>1</value>
</property>

④ mapred-site.xml (此文件默認(rèn)有mapred-site.xml.template,拷貝使用)
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>

⑤ yarn-site.xml
<property>
<name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle</value>
</property>

⑥ 安裝HDFS
xxxxx(你機(jī)器hadoop的目錄）/hadoop-2.7.3/bin/hadoop namenode -format

image5.jpg

..........中間省略.....

image6.png

⑦ 啟動hadoop
xxxx/hadoop-2.7.3
1）啟動NameNode和DataNode的守護(hù)進(jìn)程
(中間提示輸入password 幅疼，需要輸入mac開機(jī)密碼）
$ sbin/start-dfs.sh
2）啟動ResourceManager和NodeManager的守護(hù)進(jìn)程米奸。
(中間提示輸入password ，需要輸入mac開機(jī)密碼）
$ sbin/start-yarn.sh
3）訪問localhost:50070和localhost:8088測試是否正常

image7.png

image8.png

6 運(yùn)行Hadoop樣例程序
/hadoop-2.7.3(在此目錄下運(yùn)行以下命令）
①創(chuàng)建hdfs目錄:
$ bin/hdfs dfs -mkdir/user
$ bin/hdfs dfs -mkdir/user/{username}
說明:username 自己設(shè)置 (#make sure you add correct username here)

②拷貝一些文件到input目錄:
$ bin/hdfs dfs-put etc/hadoop input

③運(yùn)行樣例:
$ bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.3.jargrep input output'dfs[a-z.]+'

hadoop-mapreduce-examples-2.7.3.jar此文件需要版本需要自己查看 爽篷，路徑為：xxxx/hadoop-2.7.3/share/hadoop/mapreduce

image9.png

..........中間省略.....

image10.png

④在localhost:50070中的Utilities標(biāo)簽下找到/user/{username}目錄悴晰，可以看到樣例運(yùn)行成功。

image11.png

image12.png

7 停止Hadoop
/hadoop-2.7.3(在此目錄下運(yùn)行以下命令）
$ sbin/stop-yarn.sh
$ sbin/stop-dfs.sh

本文參考：http://zhongyaonan.com/hadoop-tutorial/setting-up-hadoop-2-6-on-mac-osx-yosemite.html