一巴碗、安裝hadoop
1.配置hadoop的Java環(huán)境支持
在${? HADOOP_HOME }/etc/hadoop目錄下
hadoop-env.sh
mapred-env.sh
yarn-env.sh
在這三個文件中均配置
export JAVA_HOME=/opt/modules/jdk1.7.0_67
hadoop/slaves文件中配置主機(jī)名
使用bin/hdfs、bin/hdfs dfs查看命令
bin/hdfs namenode -format進(jìn)行格式化
啟動hdfs相關(guān)進(jìn)程
啟動namenode:sbin/hadoop-daemon.sh start namenode
啟動datanode:sbin/hadoop-daemon.sh start?datanode
命令:jps
NameNode
DataNode
瀏覽器:hadoop01.com:50070
上傳文件至linux根目錄
hdfs:bin/hdfs dfs -put test.txt /
查看:hdfs:bin/hdfs dfs -cat test.txt /
下載:hdfs:bin/hdfs dfs -get test.txt /opt/
HDFS文件系統(tǒng)常用命令
$ bin/hdfs dfs //可以查看所有的dfs相關(guān)的操作命令
$ bin/hdfs dfs -mkdir -p /input/test
$ bin/hdfs dfs -rmkdir -p /input/test
$ bin/hdfs dfs -put -p /opt/software.jdk-7u67-linux-x64.tar.gz? /input/test