今天早上,我啟動Hadoop 饿序,然后訪問 9870端口,顯示的卻是這樣的
剛開始羹蚣,我以為我哪里配置有問題嗤堰,于是查看日志,
例如出現(xiàn)這種錯誤度宦,
我也嘗試過去解決,這里并不是Linux 上 /tmp/logs 的目錄 而是hadoop中的告匠。
解決方式也很簡單
hadoop fs -mkdir -p /tmp/logs
重新啟動戈抄,即可。
注意:上面的錯誤還不是重點后专,錯誤確實不報了划鸽,但是重啟之后,反問還是這樣戚哎。
然后我將 namenode 進行了重新格式化
格式化方式可以參考:https://blog.csdn.net/xiaonuoyo/article/details/123602386
我也為我解決了裸诽,但是并沒有,重啟之后型凳,還是無法正常顯示丈冬。
最后我把集群上的Hadoop刪了,重新裝了一遍甘畅,啟動起來依舊如此埂蕊,我此時有點崩潰(這時候往弓,到飯點了,我去吃了一個飯蓄氧,然后回來打了一會游戲函似,然后睡了一會午覺,然后就下午四點了)喉童。起來之后我又繼續(xù)解決撇寞,我重新整理思路。
- 首先檢查hdfs是否可以用
我這里使用命令的方式向hdfs里插入一些數(shù)據(jù)
hadoop fs -put 2022-06-03 /origin_data/gmall/log/topic_log/2022-06-03
進行查看
[atguigu@hadoop102 bin]$ hadoop fs -ls /origin_data/gmall/log/topic_log
Found 1 items
drwxr-xr-x - atguigu supergroup 0 2022-06-11 17:15 /origin_data/gmall/log/topic_log/2022-06-03
[atguigu@hadoop102 bin]$ hadoop fs -ls /origin_data/gmall/log/topic_log
發(fā)現(xiàn)能正常使用堂氯,我這里我確定hadoop確實沒有問題蔑担。
- 檢查yarn是否正常,
界面是正常的
hive 也能正常操作
創(chuàng)建一張表祖灰,并插入一些數(shù)據(jù)
數(shù)據(jù)是使用python 生成的钟沛,不建議大家這么插入數(shù)據(jù),作為一個大數(shù)據(jù)局扶,這種方式比較low恨统。效率還低
已經(jīng)生成一個 mr任務(wù),說明hadoop集群本身也沒有問題三妈。
- 也許跟瀏覽器有關(guān)系
正常的界面
不正常界面
我也是突然想到畜埋,于是我用其他瀏覽器訪問一下。
其他瀏覽器訪問是正常的畴蒲,我最開始用的是Chrome訪問悠鞍,說明Chrome才是問題的元兇。
我使用chrome 訪客模式訪問是正常的*(其他賬號應(yīng)該也是可以的)模燥,最后把問題排查又縮小了咖祭,說明是我這個賬號的問題。
我也沒發(fā)現(xiàn)我賬號那里設(shè)置有問題蔫骂,所以問題沒有從根本上解決么翰。
最后
除了使用以上方式排查問題外,我也使用過其他方式
- 檢查端口是否正常訪問(雖然是廢話)
- 查看防火墻是否關(guān)閉
- ntp 是否正常