hadoop 3.x遇到的問題

一炒事、錯(cuò)誤: 找不到或無法加載主類 org.apache.hadoop.mapreduce.v2.app.MRAppMaster

錯(cuò)誤信息:
Container exited with a non-zero exit code 1. Error file: prelaunch.err.
Last 4096 bytes of prelaunch.err :
Last 4096 bytes of stderr :
錯(cuò)誤: 找不到或無法加載主類 org.apache.hadoop.mapreduce.v2.app.MRAppMaster

解決方法:

在主機(jī)中運(yùn)行:hadoop classpath

記下返回的結(jié)果

vi $HADOOP_HOME/etc/hadoop/yarn-site.xml

添加一個(gè)配置

<property>
        <name>yarn.application.classpath</name>
        <value>hadoop classpath返回信息</value>
</property>

二、Hadoop格式化后start.all.sh運(yùn)行出錯(cuò)

1穴亏、master,slave都需要修改start-dfs.sh,stop-dfs.sh迫肖,start-yarn.sh锅劝,stop-yarn.sh四個(gè)文件
2、如果你的Hadoop是另外啟用其它用戶來啟動(dòng)蟆湖,記得將root改為對(duì)應(yīng)用戶

HDFS格式化后啟動(dòng)dfs出現(xiàn)以下錯(cuò)誤:

[root@hadoop101 hadoop-3.2.0]# sbin/start-all.sh
Starting namenodes on [master]
ERROR: Attempting to operate on hdfs namenode as root
ERROR: but there is no HDFS_NAMENODE_USER defined. Aborting operation.
Starting datanodes
ERROR: Attempting to operate on hdfs datanode as root
ERROR: but there is no HDFS_DATANODE_USER defined. Aborting operation.
Starting secondary namenodes [slave1]
ERROR: Attempting to operate on hdfs secondarynamenode as root
ERROR: but there is no HDFS_SECONDARYNAMENODE_USER defined. Aborting operation.

在/hadoop/sbin路徑下:
將start-dfs.sh,stop-dfs.sh兩個(gè)文件頂部添加以下參數(shù)

#!/usr/bin/env bash
HDFS_DATANODE_USER=root 
HDFS_DATANODE_SECURE_USER=hdfs 
HDFS_NAMENODE_USER=root 
HDFS_SECONDARYNAMENODE_USER=root

還有玻粪,start-yarn.sh隅津,stop-yarn.sh頂部也需添加以下:

#!/usr/bin/env bash
YARN_RESOURCEMANAGER_USER=root
HADOOP_SECURE_DN_USER=yarn
YARN_NODEMANAGER_USER=root

修改后重啟 ./start-all.sh,成功劲室!

[root@master sbin]# ./start-dfs.sh
WARNING: HADOOP_SECURE_DN_USER has been replaced by HDFS_DATANODE_SECURE_USER. Using value of HADOOP_SECURE_DN_USER.
Starting namenodes on [master]
上一次登錄:日 6月  3 03:01:37 CST 2018從 slave1pts/2 上
master: Warning: Permanently added 'master,192.168.43.161' (ECDSA) to the list of known hosts.
Starting datanodes
上一次登錄:日 6月  3 04:09:05 CST 2018pts/1 上
Starting secondary namenodes [slave1]
上一次登錄:日 6月  3 04:09:08 CST 2018pts/1 上
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末伦仍,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子很洋,更是在濱河造成了極大的恐慌充蓝,老刑警劉巖,帶你破解...
    沈念sama閱讀 222,252評(píng)論 6 516
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件喉磁,死亡現(xiàn)場(chǎng)離奇詭異谓苟,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)协怒,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,886評(píng)論 3 399
  • 文/潘曉璐 我一進(jìn)店門涝焙,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人孕暇,你說我怎么就攤上這事仑撞。” “怎么了妖滔?”我有些...
    開封第一講書人閱讀 168,814評(píng)論 0 361
  • 文/不壞的土叔 我叫張陵隧哮,是天一觀的道長(zhǎng)。 經(jīng)常有香客問我座舍,道長(zhǎng)沮翔,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 59,869評(píng)論 1 299
  • 正文 為了忘掉前任簸州,我火速辦了婚禮鉴竭,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘岸浑。我一直安慰自己搏存,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 68,888評(píng)論 6 398
  • 文/花漫 我一把揭開白布矢洲。 她就那樣靜靜地躺著璧眠,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上责静,一...
    開封第一講書人閱讀 52,475評(píng)論 1 312
  • 那天袁滥,我揣著相機(jī)與錄音,去河邊找鬼灾螃。 笑死题翻,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的腰鬼。 我是一名探鬼主播嵌赠,決...
    沈念sama閱讀 41,010評(píng)論 3 422
  • 文/蒼蘭香墨 我猛地睜開眼,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼熄赡!你這毒婦竟也來了姜挺?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,924評(píng)論 0 277
  • 序言:老撾萬榮一對(duì)情侶失蹤彼硫,失蹤者是張志新(化名)和其女友劉穎炊豪,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體拧篮,經(jīng)...
    沈念sama閱讀 46,469評(píng)論 1 319
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡词渤,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,552評(píng)論 3 342
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了他托。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片掖肋。...
    茶點(diǎn)故事閱讀 40,680評(píng)論 1 353
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖赏参,靈堂內(nèi)的尸體忽然破棺而出志笼,到底是詐尸還是另有隱情,我是刑警寧澤把篓,帶...
    沈念sama閱讀 36,362評(píng)論 5 351
  • 正文 年R本政府宣布纫溃,位于F島的核電站,受9級(jí)特大地震影響韧掩,放射性物質(zhì)發(fā)生泄漏紊浩。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 42,037評(píng)論 3 335
  • 文/蒙蒙 一疗锐、第九天 我趴在偏房一處隱蔽的房頂上張望坊谁。 院中可真熱鬧,春花似錦滑臊、人聲如沸口芍。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,519評(píng)論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽鬓椭。三九已至颠猴,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間小染,已是汗流浹背翘瓮。 一陣腳步聲響...
    開封第一講書人閱讀 33,621評(píng)論 1 274
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留裤翩,地道東北人资盅。 一個(gè)月前我還...
    沈念sama閱讀 49,099評(píng)論 3 378
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像踊赠,于是被迫代替她去往敵國和親律姨。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,691評(píng)論 2 361

推薦閱讀更多精彩內(nèi)容