Hadoop 運(yùn)行wordcount 程序

Hadoop中的wordcount 程序相當(dāng)于其他語(yǔ)言的Hello World程序,郁悶的是根竿,這個(gè)程序我已好幾次運(yùn)行失敗了。

但是今天就珠,在我的努力下寇壳,終于把它運(yùn)行成功了。此處曬圖慶祝(剛?cè)腴T有什么好慶祝的^--^)

咋運(yùn)行成功的我就不細(xì)說(shuō)了妻怎,網(wǎng)上好多文章壳炎。這里主要記錄一下遇到的坑。

1.啟動(dòng)hadoop的時(shí)候蹂季,出現(xiàn)starting namenode on ?[],我用的是偽分布式冕广,所以這個(gè)地方中括號(hào)里面應(yīng)該是localhost才對(duì)疏日,最后經(jīng)過(guò)查找發(fā)現(xiàn)core-site.xml屬性配置有問(wèn)題偿洁,屬性fs.name.default的值應(yīng)該為hdfs://localhost:9000 ,我寫成了hdfs:localhost:9000沟优,少了雙斜杠涕滋,加上之后再重新啟動(dòng),通過(guò)jps命令查詢挠阁,已經(jīng)成功啟動(dòng)宾肺。

2.在運(yùn)行wordcount程序時(shí)溯饵,出現(xiàn)異常:

File file:/usr/hadoop/hadoop-2.7.1/usr/hadoop/tmp/nm-local-dir/usercache/root/appcache/application_1478069602662_0002/usr/hadoop/tmp/nm-local-dir/usercache/root does not exist ? ?Failing this attempt. Failing the application

大概看著像某個(gè)文件或文件夾不存在,于是在網(wǎng)上找相關(guān)內(nèi)容锨用,找了半天也沒(méi)有找到靠譜的結(jié)果丰刊。

并且異常信息中的這個(gè)路徑好像根本就不存在,只是temp這個(gè)目錄有點(diǎn)熟悉增拥,突然想到core-site.xml中有個(gè)屬性就是配置temp目錄的啄巧,重新編輯這個(gè)文件,發(fā)現(xiàn)hadoop.tmp.dir這個(gè)屬性的值少了一個(gè)/符合掌栅,少了這個(gè)就意味著找不到這個(gè)文件秩仆。嘗試把路徑修改后再運(yùn)行,就得到了上面 截圖中的內(nèi)容猾封。

兩個(gè)坑其實(shí)都是粗心大意造成的澄耍,以后注意。但通過(guò)填坑關(guān)鍵還是要不斷積累解決問(wèn)題的經(jīng)驗(yàn)和方法晌缘。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末齐莲,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子磷箕,更是在濱河造成了極大的恐慌铅搓,老刑警劉巖,帶你破解...
    沈念sama閱讀 217,907評(píng)論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件搀捷,死亡現(xiàn)場(chǎng)離奇詭異星掰,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī)嫩舟,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,987評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門氢烘,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人家厌,你說(shuō)我怎么就攤上這事播玖∠笥保” “怎么了蚤认?”我有些...
    開(kāi)封第一講書人閱讀 164,298評(píng)論 0 354
  • 文/不壞的土叔 我叫張陵澜汤,是天一觀的道長(zhǎng)饲鄙。 經(jīng)常有香客問(wèn)我煞额,道長(zhǎng)幽邓,這世上最難降的妖魔是什么摇幻? 我笑而不...
    開(kāi)封第一講書人閱讀 58,586評(píng)論 1 293
  • 正文 為了忘掉前任夫否,我火速辦了婚禮殖熟,結(jié)果婚禮上局待,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好钳榨,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,633評(píng)論 6 392
  • 文/花漫 我一把揭開(kāi)白布舰罚。 她就那樣靜靜地躺著,像睡著了一般薛耻。 火紅的嫁衣襯著肌膚如雪营罢。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書人閱讀 51,488評(píng)論 1 302
  • 那天饼齿,我揣著相機(jī)與錄音愤钾,去河邊找鬼。 笑死候醒,一個(gè)胖子當(dāng)著我的面吹牛能颁,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播倒淫,決...
    沈念sama閱讀 40,275評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼伙菊,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了敌土?” 一聲冷哼從身側(cè)響起镜硕,我...
    開(kāi)封第一講書人閱讀 39,176評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎返干,沒(méi)想到半個(gè)月后兴枯,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,619評(píng)論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡矩欠,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,819評(píng)論 3 336
  • 正文 我和宋清朗相戀三年财剖,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片癌淮。...
    茶點(diǎn)故事閱讀 39,932評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡躺坟,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出乳蓄,到底是詐尸還是另有隱情咪橙,我是刑警寧澤,帶...
    沈念sama閱讀 35,655評(píng)論 5 346
  • 正文 年R本政府宣布虚倒,位于F島的核電站美侦,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏魂奥。R本人自食惡果不足惜菠剩,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,265評(píng)論 3 329
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望捧弃。 院中可真熱鬧赠叼,春花似錦擦囊、人聲如沸违霞。這莊子的主人今日做“春日...
    開(kāi)封第一講書人閱讀 31,871評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)买鸽。三九已至涧郊,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間眼五,已是汗流浹背妆艘。 一陣腳步聲響...
    開(kāi)封第一講書人閱讀 32,994評(píng)論 1 269
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留看幼,地道東北人批旺。 一個(gè)月前我還...
    沈念sama閱讀 48,095評(píng)論 3 370
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像诵姜,于是被迫代替她去往敵國(guó)和親汽煮。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,884評(píng)論 2 354

推薦閱讀更多精彩內(nèi)容