記錄hadoop一次奇怪的問題操作

今天早上,我啟動Hadoop 饿序,然后訪問 9870端口,顯示的卻是這樣的

image.png

剛開始羹蚣,我以為我哪里配置有問題嗤堰,于是查看日志,
例如出現(xiàn)這種錯誤度宦,

image.png

我也嘗試過去解決,這里并不是Linux 上 /tmp/logs 的目錄 而是hadoop中的告匠。
解決方式也很簡單

hadoop fs -mkdir -p /tmp/logs

重新啟動戈抄,即可。


注意:上面的錯誤還不是重點后专,錯誤確實不報了划鸽,但是重啟之后,反問還是這樣戚哎。
然后我將 namenode 進行了重新格式化
格式化方式可以參考:https://blog.csdn.net/xiaonuoyo/article/details/123602386


我也為我解決了裸诽,但是并沒有,重啟之后型凳,還是無法正常顯示丈冬。


最后我把集群上的Hadoop刪了,重新裝了一遍甘畅,啟動起來依舊如此埂蕊,我此時有點崩潰(這時候往弓,到飯點了,我去吃了一個飯蓄氧,然后回來打了一會游戲函似,然后睡了一會午覺,然后就下午四點了)喉童。起來之后我又繼續(xù)解決撇寞,我重新整理思路。

  1. 首先檢查hdfs是否可以用
    我這里使用命令的方式向hdfs里插入一些數(shù)據(jù)
hadoop fs -put 2022-06-03 /origin_data/gmall/log/topic_log/2022-06-03

進行查看

[atguigu@hadoop102 bin]$ hadoop fs -ls /origin_data/gmall/log/topic_log
Found 1 items
drwxr-xr-x   - atguigu supergroup          0 2022-06-11 17:15 /origin_data/gmall/log/topic_log/2022-06-03
[atguigu@hadoop102 bin]$ hadoop fs -ls /origin_data/gmall/log/topic_log

發(fā)現(xiàn)能正常使用堂氯,我這里我確定hadoop確實沒有問題蔑担。

  1. 檢查yarn是否正常,
    界面是正常的
image.png

hive 也能正常操作

image.png

創(chuàng)建一張表祖灰,并插入一些數(shù)據(jù)

image.png

數(shù)據(jù)是使用python 生成的钟沛,不建議大家這么插入數(shù)據(jù),作為一個大數(shù)據(jù)局扶,這種方式比較low恨统。效率還低


image.png

已經(jīng)生成一個 mr任務(wù),說明hadoop集群本身也沒有問題三妈。

  1. 也許跟瀏覽器有關(guān)系
    正常的界面
image.png

不正常界面

image.png

我也是突然想到畜埋,于是我用其他瀏覽器訪問一下。

image.png

其他瀏覽器訪問是正常的畴蒲,我最開始用的是Chrome訪問悠鞍,說明Chrome才是問題的元兇。
image.png

我使用chrome 訪客模式訪問是正常的*(其他賬號應(yīng)該也是可以的)模燥,最后把問題排查又縮小了咖祭,說明是我這個賬號的問題。
我也沒發(fā)現(xiàn)我賬號那里設(shè)置有問題蔫骂,所以問題沒有從根本上解決么翰。

最后

除了使用以上方式排查問題外,我也使用過其他方式

  1. 檢查端口是否正常訪問(雖然是廢話)
  2. 查看防火墻是否關(guān)閉
  3. ntp 是否正常
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末辽旋,一起剝皮案震驚了整個濱河市浩嫌,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌补胚,老刑警劉巖码耐,帶你破解...
    沈念sama閱讀 206,839評論 6 482
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異溶其,居然都是意外死亡骚腥,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,543評論 2 382
  • 文/潘曉璐 我一進店門瓶逃,熙熙樓的掌柜王于貴愁眉苦臉地迎上來桦沉,“玉大人每瞒,你說我怎么就攤上這事〈柯叮” “怎么了剿骨?”我有些...
    開封第一講書人閱讀 153,116評論 0 344
  • 文/不壞的土叔 我叫張陵,是天一觀的道長埠褪。 經(jīng)常有香客問我浓利,道長,這世上最難降的妖魔是什么钞速? 我笑而不...
    開封第一講書人閱讀 55,371評論 1 279
  • 正文 為了忘掉前任贷掖,我火速辦了婚禮,結(jié)果婚禮上渴语,老公的妹妹穿的比我還像新娘苹威。我一直安慰自己,他們只是感情好驾凶,可當(dāng)我...
    茶點故事閱讀 64,384評論 5 374
  • 文/花漫 我一把揭開白布牙甫。 她就那樣靜靜地躺著,像睡著了一般调违。 火紅的嫁衣襯著肌膚如雪窟哺。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 49,111評論 1 285
  • 那天技肩,我揣著相機與錄音且轨,去河邊找鬼。 笑死虚婿,一個胖子當(dāng)著我的面吹牛旋奢,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播然痊,決...
    沈念sama閱讀 38,416評論 3 400
  • 文/蒼蘭香墨 我猛地睜開眼黄绩,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了玷过?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 37,053評論 0 259
  • 序言:老撾萬榮一對情侶失蹤筑煮,失蹤者是張志新(化名)和其女友劉穎辛蚊,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體真仲,經(jīng)...
    沈念sama閱讀 43,558評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡袋马,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,007評論 2 325
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了秸应。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片虑凛。...
    茶點故事閱讀 38,117評論 1 334
  • 序言:一個原本活蹦亂跳的男人離奇死亡碑宴,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出桑谍,到底是詐尸還是另有隱情延柠,我是刑警寧澤,帶...
    沈念sama閱讀 33,756評論 4 324
  • 正文 年R本政府宣布锣披,位于F島的核電站贞间,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏雹仿。R本人自食惡果不足惜增热,卻給世界環(huán)境...
    茶點故事閱讀 39,324評論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望胧辽。 院中可真熱鬧峻仇,春花似錦、人聲如沸邑商。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,315評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽奠骄。三九已至豆同,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間含鳞,已是汗流浹背影锈。 一陣腳步聲響...
    開封第一講書人閱讀 31,539評論 1 262
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留蝉绷,地道東北人鸭廷。 一個月前我還...
    沈念sama閱讀 45,578評論 2 355
  • 正文 我出身青樓,卻偏偏與公主長得像熔吗,于是被迫代替她去往敵國和親辆床。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 42,877評論 2 345

推薦閱讀更多精彩內(nèi)容