少見的hive集群時(shí)間不同步報(bào)錯(cuò)站超。

Diagnostic Messages for this Task:

Container launch failed for container_1603712387555_0006_02_000006 : org.apache.hadoop.yarn.exceptions.YarnException: Unauthorized request to start container.

This token is expired. current time is 1603727129103 found 1603726310194

Note: System times on machines may be out of sync. Check system time and time zones.

? ? ? ? at sun.reflect.NativeConstructorAccessorImpl.newInstance0(Native Method)

? ? ? ? at sun.reflect.NativeConstructorAccessorImpl.newInstance(NativeConstructorAccessorImpl.java:62)

? ? ? ? at sun.reflect.DelegatingConstructorAccessorImpl.newInstance(DelegatingConstructorAccessorImpl.java:45)

? ? ? ? at java.lang.reflect.Constructor.newInstance(Constructor.java:423)

? ? ? ? at org.apache.hadoop.yarn.api.records.impl.pb.SerializedExceptionPBImpl.instantiateExceptionImpl(SerializedExceptionPBImpl.java:171)

? ? ? ? at org.apache.hadoop.yarn.api.records.impl.pb.SerializedExceptionPBImpl.instantiateException(SerializedExceptionPBImpl.java:182)

? ? ? ? at org.apache.hadoop.yarn.api.records.impl.pb.SerializedExceptionPBImpl.deSerialize(SerializedExceptionPBImpl.java:106)

? ? ? ? at org.apache.hadoop.mapreduce.v2.app.launcher.ContainerLauncherImpl$Container.launch(ContainerLauncherImpl.java:163)

? ? ? ? at org.apache.hadoop.mapreduce.v2.app.launcher.ContainerLauncherImpl$EventProcessor.run(ContainerLauncherImpl.java:394)

? ? ? ? at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1149)

? ? ? ? at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:624)

? ? ? ? at java.lang.Thread.run(Thread.java:748)

FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask


錯(cuò)誤原因布蔗,集群時(shí)間不同步;

于是查看挨個(gè)查看 ,果然發(fā)現(xiàn)有一臺(tái)時(shí)間不同步?


所以重新配置一下時(shí)間服務(wù)器 ,然后重啟該節(jié)點(diǎn)


解決了集群時(shí)間同步問題1) 時(shí)間服務(wù)器配置(必須root用戶)

? (1)在所有節(jié)點(diǎn)關(guān)閉ntp服務(wù)和自啟動(dòng)

sudo systemctl stop ntpd

sudo systemctl disable ntpd

? (2)在hadoop102上修改ntp配置文件(hadoop102為時(shí)間服務(wù)器)

sudo vim /etc/ntp.conf

修改內(nèi)容如下

?? ? (a)修改1(授權(quán)192.168.1.0-192.168.1.255網(wǎng)段上的所有機(jī)器可以從這臺(tái)機(jī)器上查詢和同步時(shí)間)

#restrict 192.168.1.0 mask 255.255.255.0 nomodify notrap

改為(去掉注釋#)

restrict 192.168.1.0 mask 255.255.255.0 nomodify notrap

(b)修改2(集群在局域網(wǎng)中匿级,不使用其他互聯(lián)網(wǎng)上的時(shí)間)

server 0.centos.pool.ntp.org iburst

server 1.centos.pool.ntp.org iburst

server 2.centos.pool.ntp.org iburst

server 3.centos.pool.ntp.org iburst

改為(全部注釋掉)

#server 0.centos.pool.ntp.org iburst

#server 1.centos.pool.ntp.org iburst

#server 2.centos.pool.ntp.org iburst

#server 3.centos.pool.ntp.org iburst

? ? (c)添加3(當(dāng)該節(jié)點(diǎn)丟失網(wǎng)絡(luò)連接,依然可以采用本地時(shí)間作為時(shí)間服務(wù)器為集群中的其他節(jié)點(diǎn)提供時(shí)間同步)

server 127.127.1.0

fudge 127.127.1.0 stratum 10

?(3)在102上修改/etc/sysconfig/ntpd 文件

vim /etc/sysconfig/ntpd

增加內(nèi)容如下(讓硬件時(shí)間與系統(tǒng)時(shí)間一起同步)

SYNC_HWCLOCK=yes

? Tips:

? 系統(tǒng)時(shí)間: 一般說來就是我們執(zhí)行 date命令看到的時(shí)間染厅,linux系統(tǒng)下所有的時(shí)間調(diào) 用(除了直接訪問硬件時(shí)間的命令)都是使用的這個(gè)時(shí)間痘绎。

? 硬件時(shí)間: 主板上BIOS中的時(shí)間,由主板電池供電來維持運(yùn)行肖粮,系統(tǒng)開機(jī)時(shí)要讀取

? ? ? ? ? ? ? ? 這個(gè)時(shí)間简逮,并根據(jù)它來設(shè)定系統(tǒng)時(shí)間(注意:系統(tǒng)啟動(dòng)時(shí)根據(jù)硬件時(shí)間

? ? 設(shè)定系統(tǒng)時(shí)間的過程可能存在時(shí)區(qū)換算,這要視具體的系統(tǒng)及相關(guān)設(shè)置而

? ? ? ? ? ? ? ? 定)

?(4)在102重新啟動(dòng)ntpd服務(wù)

sudo systemctl start ntpd

?(5)在102設(shè)置ntpd服務(wù)開機(jī)啟動(dòng)

sudo systemctl enable ntpd

2) 其他機(jī)器配置(必須root用戶)

?(1)在其他機(jī)器配置1分鐘與時(shí)間服務(wù)器同步一次

sudo crontab -e

編寫定時(shí)任務(wù)如下:

*/1 * * * * /usr/sbin/ntpdate hadoop102

?(2)修改任意機(jī)器時(shí)間

date -s "2017-9-11 11:11:11"

?(3)一分鐘后查看機(jī)器是否與時(shí)間服務(wù)器同步

date

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末尿赚,一起剝皮案震驚了整個(gè)濱河市散庶,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌凌净,老刑警劉巖悲龟,帶你破解...
    沈念sama閱讀 222,681評(píng)論 6 517
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異冰寻,居然都是意外死亡须教,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 95,205評(píng)論 3 399
  • 文/潘曉璐 我一進(jìn)店門斩芭,熙熙樓的掌柜王于貴愁眉苦臉地迎上來轻腺,“玉大人,你說我怎么就攤上這事划乖”嵫” “怎么了?”我有些...
    開封第一講書人閱讀 169,421評(píng)論 0 362
  • 文/不壞的土叔 我叫張陵琴庵,是天一觀的道長(zhǎng)误算。 經(jīng)常有香客問我,道長(zhǎng)迷殿,這世上最難降的妖魔是什么儿礼? 我笑而不...
    開封第一講書人閱讀 60,114評(píng)論 1 300
  • 正文 為了忘掉前任,我火速辦了婚禮庆寺,結(jié)果婚禮上蚊夫,老公的妹妹穿的比我還像新娘。我一直安慰自己懦尝,他們只是感情好知纷,可當(dāng)我...
    茶點(diǎn)故事閱讀 69,116評(píng)論 6 398
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著导披,像睡著了一般屈扎。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上撩匕,一...
    開封第一講書人閱讀 52,713評(píng)論 1 312
  • 那天鹰晨,我揣著相機(jī)與錄音,去河邊找鬼止毕。 笑死模蜡,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的扁凛。 我是一名探鬼主播忍疾,決...
    沈念sama閱讀 41,170評(píng)論 3 422
  • 文/蒼蘭香墨 我猛地睜開眼,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼谨朝!你這毒婦竟也來了卤妒?” 一聲冷哼從身側(cè)響起甥绿,我...
    開封第一講書人閱讀 40,116評(píng)論 0 277
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎则披,沒想到半個(gè)月后共缕,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 46,651評(píng)論 1 320
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡士复,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,714評(píng)論 3 342
  • 正文 我和宋清朗相戀三年图谷,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片阱洪。...
    茶點(diǎn)故事閱讀 40,865評(píng)論 1 353
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡便贵,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出冗荸,到底是詐尸還是另有隱情承璃,我是刑警寧澤,帶...
    沈念sama閱讀 36,527評(píng)論 5 351
  • 正文 年R本政府宣布俏竞,位于F島的核電站绸硕,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏魂毁。R本人自食惡果不足惜玻佩,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 42,211評(píng)論 3 336
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望席楚。 院中可真熱鬧咬崔,春花似錦、人聲如沸烦秩。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,699評(píng)論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽只祠。三九已至兜蠕,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間抛寝,已是汗流浹背熊杨。 一陣腳步聲響...
    開封第一講書人閱讀 33,814評(píng)論 1 274
  • 我被黑心中介騙來泰國(guó)打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留盗舰,地道東北人晶府。 一個(gè)月前我還...
    沈念sama閱讀 49,299評(píng)論 3 379
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像钻趋,于是被迫代替她去往敵國(guó)和親川陆。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,870評(píng)論 2 361