Hadoop測試使用

通過一個 MapReduce 程序測試 Hadoop匈织,統(tǒng)計 HDFS 中/input/data.txt 文件內(nèi)單詞出現(xiàn) 的次數(shù)盆均。

(1)在 Ubuntu 操作系統(tǒng)的~目錄下,創(chuàng)建一個文本文件 data.txt肩碟。

$ vi data.txt

在 data.txt 文件中輸入如下內(nèi)容强窖,保存并退出。

Hello World

Hello Hadoop


(2)在 HDFS 創(chuàng)建 input 文件夾削祈,命令如下翅溺。

$ hdfs dfs -mkdir /input

(3)將 data.txt 上傳到 HDFS,命令如下髓抑。

$ hdfs dfs -put data.txt /input

(4)查看是否上傳成功咙崎,命令如下

$ hdfs dfs -ls /input

(5)運行 MapReduce WordCount 例子,命令如下吨拍。

$ cd ~/hadoop/share/hadoop/mapreduce

$ hadoop jar hadoop-mapreduce-examples-2.7.3.jar wordcount /input/data.txt /output

(6)查看結(jié)果褪猛。

$ hdfs dfs -cat /output/part-r-00000


(7)關(guān)閉Hadoop進程

stop-all.sh

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市羹饰,隨后出現(xiàn)的幾起案子伊滋,更是在濱河造成了極大的恐慌,老刑警劉巖队秩,帶你破解...
    沈念sama閱讀 206,968評論 6 482
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件笑旺,死亡現(xiàn)場離奇詭異,居然都是意外死亡馍资,警方通過查閱死者的電腦和手機燥撞,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,601評論 2 382
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人物舒,你說我怎么就攤上這事色洞。” “怎么了冠胯?”我有些...
    開封第一講書人閱讀 153,220評論 0 344
  • 文/不壞的土叔 我叫張陵火诸,是天一觀的道長。 經(jīng)常有香客問我荠察,道長置蜀,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 55,416評論 1 279
  • 正文 為了忘掉前任悉盆,我火速辦了婚禮盯荤,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘焕盟。我一直安慰自己秋秤,他們只是感情好,可當我...
    茶點故事閱讀 64,425評論 5 374
  • 文/花漫 我一把揭開白布脚翘。 她就那樣靜靜地躺著灼卢,像睡著了一般。 火紅的嫁衣襯著肌膚如雪来农。 梳的紋絲不亂的頭發(fā)上鞋真,一...
    開封第一講書人閱讀 49,144評論 1 285
  • 那天,我揣著相機與錄音沃于,去河邊找鬼涩咖。 笑死,一個胖子當著我的面吹牛繁莹,可吹牛的內(nèi)容都是我干的檩互。 我是一名探鬼主播,決...
    沈念sama閱讀 38,432評論 3 401
  • 文/蒼蘭香墨 我猛地睜開眼蒋困,長吁一口氣:“原來是場噩夢啊……” “哼盾似!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起雪标,我...
    開封第一講書人閱讀 37,088評論 0 261
  • 序言:老撾萬榮一對情侶失蹤零院,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后村刨,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體告抄,經(jīng)...
    沈念sama閱讀 43,586評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,028評論 2 325
  • 正文 我和宋清朗相戀三年嵌牺,在試婚紗的時候發(fā)現(xiàn)自己被綠了打洼。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片龄糊。...
    茶點故事閱讀 38,137評論 1 334
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖募疮,靈堂內(nèi)的尸體忽然破棺而出炫惩,到底是詐尸還是另有隱情,我是刑警寧澤阿浓,帶...
    沈念sama閱讀 33,783評論 4 324
  • 正文 年R本政府宣布他嚷,位于F島的核電站,受9級特大地震影響芭毙,放射性物質(zhì)發(fā)生泄漏筋蓖。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 39,343評論 3 307
  • 文/蒙蒙 一退敦、第九天 我趴在偏房一處隱蔽的房頂上張望粘咖。 院中可真熱鬧,春花似錦侈百、人聲如沸瓮下。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,333評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽唱捣。三九已至两蟀,卻和暖如春网梢,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背赂毯。 一陣腳步聲響...
    開封第一講書人閱讀 31,559評論 1 262
  • 我被黑心中介騙來泰國打工战虏, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人党涕。 一個月前我還...
    沈念sama閱讀 45,595評論 2 355
  • 正文 我出身青樓烦感,卻偏偏與公主長得像,于是被迫代替她去往敵國和親膛堤。 傳聞我的和親對象是個殘疾皇子手趣,可洞房花燭夜當晚...
    茶點故事閱讀 42,901評論 2 345

推薦閱讀更多精彩內(nèi)容