多機(jī)器任務(wù)框架

數(shù)據(jù)結(jié)構(gòu)

** 什么時(shí)候重建任務(wù)隊(duì)列盟广?**

slave來取任務(wù)的時(shí)候沒有取到职辅,就會(huì)重建任務(wù)隊(duì)列
Slave取任務(wù)的時(shí)候會(huì)按照 優(yōu)先隊(duì)列 重試隊(duì)列 普通隊(duì)列的順序來取任務(wù)

**Slave來取任務(wù)的時(shí)候的操作这敬? **

首先從taskmanager中取一個(gè)任務(wù)娱两,如果取到任務(wù)键科,向taskmonitor來注冊(cè)任務(wù)(上邊的taskmonitor三個(gè)數(shù)據(jù)結(jié)構(gòu)都有記錄的),最后返回任務(wù)挠锥,如果沒有取到觸發(fā)重建任務(wù)隊(duì)列峭范。

taskmonitor監(jiān)控

Taskmonitor每隔一分鐘進(jìn)行一次slave心跳,獲取taskstate瘪贱,如果發(fā)現(xiàn)某個(gè)slave取走了任務(wù)至少5s鐘了還沒有taskstate(taskstate一般slave成功獲取到任務(wù)的時(shí)候就會(huì)生成)就認(rèn)為任務(wù)可能出錯(cuò)了(這樣判斷回不會(huì)有問題呢?如果網(wǎng)絡(luò)傳輸大于5s呢辆毡?如果判斷有問題菜秦,就有可能造成兩個(gè)slave取得同一個(gè)任務(wù)),這時(shí)候?qū)⑷蝿?wù)從monitor中刪除(Clientpool和Clientpool)舶掖,并重新加到重試隊(duì)列中球昨。當(dāng)對(duì)slave心跳的時(shí)候網(wǎng)絡(luò)異常,那么這種情況比較嚴(yán)重眨攘,將Clientpool中該ip下所有的任務(wù)移到重試隊(duì)列中去主慰,并刪除Clientpool該ip下的記錄,同時(shí)刪除taskItemPool中所有記錄鲫售,刪除clientConcurrentHashMap該ip的信息共螺,也就是從slave集群中移除該節(jié)點(diǎn)。

taskmanager

主要是用來管理任務(wù)隊(duì)列的情竹,我們?cè)趕pring配置文件里配置了一個(gè)任務(wù)隊(duì)列藐不,然后在初始化的時(shí)候會(huì)生成出來一個(gè)隊(duì)列組(group),里面不僅包含這個(gè)隊(duì)列還有對(duì)應(yīng)的優(yōu)先隊(duì)列和重試隊(duì)列秦效。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末雏蛮,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子阱州,更是在濱河造成了極大的恐慌挑秉,老刑警劉巖,帶你破解...
    沈念sama閱讀 219,110評(píng)論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件苔货,死亡現(xiàn)場(chǎng)離奇詭異犀概,居然都是意外死亡立哑,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,443評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門阱冶,熙熙樓的掌柜王于貴愁眉苦臉地迎上來刁憋,“玉大人,你說我怎么就攤上這事木蹬≈脸埽” “怎么了?”我有些...
    開封第一講書人閱讀 165,474評(píng)論 0 356
  • 文/不壞的土叔 我叫張陵镊叁,是天一觀的道長尘颓。 經(jīng)常有香客問我,道長晦譬,這世上最難降的妖魔是什么疤苹? 我笑而不...
    開封第一講書人閱讀 58,881評(píng)論 1 295
  • 正文 為了忘掉前任,我火速辦了婚禮敛腌,結(jié)果婚禮上卧土,老公的妹妹穿的比我還像新娘。我一直安慰自己像樊,他們只是感情好尤莺,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,902評(píng)論 6 392
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著生棍,像睡著了一般颤霎。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上涂滴,一...
    開封第一講書人閱讀 51,698評(píng)論 1 305
  • 那天友酱,我揣著相機(jī)與錄音,去河邊找鬼柔纵。 笑死缔杉,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的搁料。 我是一名探鬼主播壮吩,決...
    沈念sama閱讀 40,418評(píng)論 3 419
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼加缘!你這毒婦竟也來了鸭叙?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,332評(píng)論 0 276
  • 序言:老撾萬榮一對(duì)情侶失蹤拣宏,失蹤者是張志新(化名)和其女友劉穎沈贝,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體勋乾,經(jīng)...
    沈念sama閱讀 45,796評(píng)論 1 316
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡宋下,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,968評(píng)論 3 337
  • 正文 我和宋清朗相戀三年嗡善,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片学歧。...
    茶點(diǎn)故事閱讀 40,110評(píng)論 1 351
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡罩引,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出枝笨,到底是詐尸還是另有隱情袁铐,我是刑警寧澤,帶...
    沈念sama閱讀 35,792評(píng)論 5 346
  • 正文 年R本政府宣布横浑,位于F島的核電站剔桨,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏徙融。R本人自食惡果不足惜洒缀,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,455評(píng)論 3 331
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望欺冀。 院中可真熱鬧树绩,春花似錦、人聲如沸隐轩。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,003評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽龙助。三九已至,卻和暖如春蛛芥,著一層夾襖步出監(jiān)牢的瞬間提鸟,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,130評(píng)論 1 272
  • 我被黑心中介騙來泰國打工仅淑, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留称勋,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 48,348評(píng)論 3 373
  • 正文 我出身青樓涯竟,卻偏偏與公主長得像赡鲜,于是被迫代替她去往敵國和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子庐船,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,047評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容

  • Spring Cloud為開發(fā)人員提供了快速構(gòu)建分布式系統(tǒng)中一些常見模式的工具(例如配置管理银酬,服務(wù)發(fā)現(xiàn),斷路器筐钟,智...
    卡卡羅2017閱讀 134,664評(píng)論 18 139
  • 1揩瞪、第八章 Samba服務(wù)器2、第八章 NFS服務(wù)器3篓冲、第十章 Linux下DNS服務(wù)器配站點(diǎn)李破,域名解析概念命令:...
    哈熝少主閱讀 3,735評(píng)論 0 10
  • 環(huán)境 操作系統(tǒng):CentOS-6.6-x86_64-bin-DVD1.iso MySQL版本:mysql-5.6....
    思?jí)鬚HP閱讀 2,044評(píng)論 0 12
  • 我是嘩眾的小丑 邁著沉重的步伐 還自以為在梁上 輕盈得滴滴答答 我是悲傷的小丑 表演真真和假假 畫著上揚(yáng)的嘴角 默...
    _王先森_閱讀 60評(píng)論 0 2
  • 沒看懂電影里“美妙絕倫”的舞姿宠哄,但欣賞電影對(duì)愛情0或100的觀點(diǎn),綾子選擇100嗤攻,峰子選擇0毛嫉,結(jié)局一個(gè)在愛情里溺亡...
    妹刊閱讀 1,651評(píng)論 0 1