1--hadoop dfsadmin -report/-refreshNodes
2--hadoop balancer -threshold 5
3--distcp hdfs-hftp://had-0:8020-50070 url2 -i,-overwrite,-update
4--fsck -blocks -files
5--fs du,cat,text
6--hadoop job -list/-kill jobid/-killtask -taskid
7--編譯libfs
fuse -hadoop-fuse-dfs dfs:// <local-dir>
Hadoop對處理單個大文件比處理多個小文件更有效率辜王，另外單個文件也非常占用HDFS的存儲空間华匾。所以往往要將其合并起來睹逃。
1，getmerge
hadoop有一個命令行工具getmerge臼隔，用于將一組HDFS上的文件復(fù)制到本地計算機以前進行合并
參考：http://hadoop.apache.org/common/docs/r0.19.2/cn/hdfs_shell.html
使用方法：hadoop fs -getmerge <src> <localdst> [addnl]
接受一個源目錄和一個目標文件作為輸入，并且將源目錄中所有的文件連接成本地目標文件妄壶。addnl是可選的摔握，用于指定在每個文件結(jié)尾添加一個換行符。
多嘴幾句：調(diào)用文件系統(tǒng)(FS)Shell命令應(yīng)使用 bin/hadoop fs <args>的形式丁寄。 所有的的FS shell命令使用URI路徑作為參數(shù)氨淌。URI格式是scheme://authority/path泊愧。
--上傳文件
nohup ~/line/soft/hadoop/CDH-5.3.2-1.cdh5.3.2.p0.10/bin/hadoop --config ~/line/soft/hadoop/CDH-5.3.2-1.cdh5.3.2.p0.10/bin/hadoop-conf/ fs -put ~/db /user/dub/tmp/ > upload.log.201503261122 &
hadoop常用命令
最后編輯于 ：
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
- 文/潘曉璐 我一進店門，熙熙樓的掌柜王于貴愁眉苦臉地迎上來严望，“玉大人多艇，你說我怎么就攤上這事∠裎牵” “怎么了墩蔓？”我有些...
- 文/不壞的土叔 我叫張陵，是天一觀的道長萧豆。 經(jīng)常有香客問我奸披，道長，這世上最難降的妖魔是什么涮雷？ 我笑而不...
- 正文 為了忘掉前任阵面，我火速辦了婚禮，結(jié)果婚禮上洪鸭，老公的妹妹穿的比我還像新娘样刷。我一直安慰自己，他們只是感情好览爵，可當我...
- 文/花漫 我一把揭開白布置鼻。 她就那樣靜靜地躺著，像睡著了一般蜓竹。 火紅的嫁衣襯著肌膚如雪箕母。 梳的紋絲不亂的頭發(fā)上，一...
- 文/蒼蘭香墨 我猛地睜開眼希太，長吁一口氣：“原來是場噩夢啊……” “哼克饶！你這毒婦竟也來了？” 一聲冷哼從身側(cè)響起誊辉，我...
- 正文 年R本政府宣布，位于F島的核電站枉证，受9級特大地震影響矮男，放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜室谚，卻給世界環(huán)境...
- 文/蒙蒙 一毡鉴、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧秒赤，春花似錦猪瞬、人聲如沸。這莊子的主人今日做“春日...
- 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至潮售，卻和暖如春痊项，著一層夾襖步出監(jiān)牢的瞬間，已是汗流浹背饲做。 一陣腳步聲響...
推薦閱讀更多精彩內(nèi)容
- 啟動Hadoop進入HADOOP_HOME目錄。執(zhí)行sh bin/start-all.sh 關(guān)閉Hadoop進入H...
- FS Shell調(diào)用文件系統(tǒng)(FS)Shell命令應(yīng)使用 bin/hadoop fs 的形式肮砾。 所有的的FS s...
- Linux： 查看9001端口的監(jiān)聽進程 netstat -anp | grep 9001 Mac查看監(jiān)聽端口 n...
- 1诀黍、運行環(huán)境 主機IP 主機名 2、配置主機名(分別在五臺機器上執(zhí)行) hostname +主機名例如： h...
- FS Shell 調(diào)用文件系統(tǒng)(FS)Shell命令應(yīng)使用bin/hadoop fs 的形式仗处。 所有的的FS ...
