Spark任務(wù)異常The auxService spaark_shuffle does not exist

問題現(xiàn)象

Spark任務(wù)拋出如下異常：

org.apache.hadoop.yarm.exception.InvalidAuxServiceException: The auxService:spark_shuffle does not exist

問題解決方案

于yarn-site.xml修改或添加如下配置：

<property>
    <name>yarn.nodemanager.aux-services</name>
    <value>spark_shuffle,mapreduce_shuffle</value>
</property>
<property>
    <name>yarn.nodemanager.aux-services.spark_shuffle.class</name>
    <value>org.apache.spark.network.yarn.YarnShuffleService</value>
</property>

最后編輯于：2020.03.05 23:48:01

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者

禁止轉(zhuǎn)載镇眷，如需轉(zhuǎn)載請通過簡信或評論聯(lián)系作者蟹演。

人面猴
序言：七十年代末醉旦，一起剝皮案震驚了整個(gè)濱河市纳击，隨后出現(xiàn)的幾起案子肥矢，更是在濱河造成了極大的恐慌哈垢，老刑警劉巖忠烛，帶你破解...
沈念sama閱讀 221,430評論 6贊 515
死咒
序言：濱河連續(xù)發(fā)生了三起死亡事件概耻，死亡現(xiàn)場離奇詭異芥喇，居然都是意外死亡西采，警方通過查閱死者的電腦和手機(jī)，發(fā)現(xiàn)死者居然都...
沈念sama閱讀 94,406評論 3贊 398
救了他兩次的神仙讓他今天三更去死
文/潘曉璐我一進(jìn)店門继控，熙熙樓的掌柜王于貴愁眉苦臉地迎上來械馆，“玉大人，你說我怎么就攤上這事武通∨椋” “怎么了？”我有些...
開封第一講書人閱讀 167,834評論 0贊 360
道士緝兇錄：失蹤的賣姜人
文/不壞的土叔我叫張陵冶忱，是天一觀的道長尾菇。經(jīng)常有香客問我，道長囚枪，這世上最難降的妖魔是什么派诬？我笑而不...
開封第一講書人閱讀 59,543評論 1贊 296
?港島之戀（遺憾婚禮）
正文為了忘掉前任，我火速辦了婚禮链沼，結(jié)果婚禮上默赂，老公的妹妹穿的比我還像新娘。我一直安慰自己括勺，他們只是感情好放可，可當(dāng)我...
茶點(diǎn)故事閱讀 68,547評論 6贊 397
惡毒庶女頂嫁案：這布局不是一般人想出來的
文/花漫我一把揭開白布。她就那樣靜靜地躺著朝刊，像睡著了一般耀里。火紅的嫁衣襯著肌膚如雪。梳的紋絲不亂的頭發(fā)上拾氓，一...
開封第一講書人閱讀 52,196評論 1贊 308
城市分裂傳說
那天冯挎，我揣著相機(jī)與錄音，去河邊找鬼。笑死房官，一個(gè)胖子當(dāng)著我的面吹牛趾徽，可吹牛的內(nèi)容都是我干的。我是一名探鬼主播翰守，決...
沈念sama閱讀 40,776評論 3贊 421
雙鴛鴦連環(huán)套：你想象不到人心有多黑
文/蒼蘭香墨我猛地睜開眼孵奶，長吁一口氣：“原來是場噩夢啊……” “哼！你這毒婦竟也來了蜡峰？” 一聲冷哼從身側(cè)響起了袁，我...
開封第一講書人閱讀 39,671評論 0贊 276
萬榮殺人案實(shí)錄
序言：老撾萬榮一對情侶失蹤，失蹤者是張志新（化名）和其女友劉穎湿颅，沒想到半個(gè)月后载绿，有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體，經(jīng)...
沈念sama閱讀 46,221評論 1贊 320
?護(hù)林員之死
正文獨(dú)居荒郊野嶺守林人離奇死亡油航，尸身上長有42處帶血的膿包…… 初始之章·張勛以下內(nèi)容為張勛視角年9月15日...
茶點(diǎn)故事閱讀 38,303評論 3贊 340
?白月光啟示錄
正文我和宋清朗相戀三年崭庸，在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片谊囚。...
茶點(diǎn)故事閱讀 40,444評論 1贊 352
活死人
序言：一個(gè)原本活蹦亂跳的男人離奇死亡怕享，死狀恐怖，靈堂內(nèi)的尸體忽然破棺而出镰踏，到底是詐尸還是另有隱情熬粗，我是刑警寧澤，帶...
沈念sama閱讀 36,134評論 5贊 350
?日本核電站爆炸內(nèi)幕
正文年R本政府宣布余境，位于F島的核電站，受9級特大地震影響灌诅，放射性物質(zhì)發(fā)生泄漏芳来。R本人自食惡果不足惜，卻給世界環(huán)境...
茶點(diǎn)故事閱讀 41,810評論 3贊 333
男人毒藥：我在死后第九天來索命
文/蒙蒙一猜拾、第九天我趴在偏房一處隱蔽的房頂上張望即舌。院中可真熱鬧块请，春花似錦溶锭、人聲如沸。這莊子的主人今日做“春日...
開封第一講書人閱讀 32,285評論 0贊 24
一樁弒父案盯仪，背后竟有這般陰謀
文/蒼蘭香墨我抬頭看了看天上的太陽紊搪。三九已至，卻和暖如春全景，著一層夾襖步出監(jiān)牢的瞬間耀石，已是汗流浹背。一陣腳步聲響...
開封第一講書人閱讀 33,399評論 1贊 272
情欲美人皮
我被黑心中介騙來泰國打工爸黄，沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留滞伟，地道東北人揭鳞。一個(gè)月前我還...
沈念sama閱讀 48,837評論 3贊 376
代替公主和親
正文我出身青樓，卻偏偏與公主長得像梆奈，于是被迫代替她去往敵國和親野崇。傳聞我的和親對象是個(gè)殘疾皇子，可洞房花燭夜當(dāng)晚...
茶點(diǎn)故事閱讀 45,455評論 2贊 359

Spark任務(wù)異常The auxService spaark_shuffle does not exist

問題現(xiàn)象

問題解決方案

推薦閱讀更多精彩內(nèi)容