MQ之如何做到消息延時(shí)

一汰聋、緣起

很多時(shí)候门粪,業(yè)務(wù)有“在一段時(shí)間之后,完成一個(gè)工作任務(wù)”的需求烹困。

例如:滴滴打車(chē)訂單完成后玄妈,如果用戶(hù)一直不評(píng)價(jià),48小時(shí)后會(huì)將自動(dòng)評(píng)價(jià)為5星髓梅。

一般來(lái)說(shuō)怎么實(shí)現(xiàn)這類(lèi)“48小時(shí)后自動(dòng)評(píng)價(jià)為5星”需求呢拟蜻?

常見(jiàn)方案:?jiǎn)?dòng)一個(gè)cron定時(shí)任務(wù),每小時(shí)跑一次枯饿,將完成時(shí)間超過(guò)48小時(shí)的訂單取出酝锅,置為5星,并把評(píng)價(jià)狀態(tài)置為已評(píng)價(jià)鸭你。

假設(shè)訂單表的結(jié)構(gòu)為:t_order(oid, finish_time, stars, status, …)屈张,更具體的擒权,定時(shí)任務(wù)每隔一個(gè)小時(shí)會(huì)這么做一次:

select oid from t_order where finish_time > 48hours and status=0;

update t_order set stars=5 and status=1 where oid in[…];

如果數(shù)據(jù)量很大袱巨,需要分頁(yè)查詢(xún),分頁(yè)update碳抄,這將會(huì)是一個(gè)for循環(huán)愉老。

方案的不足:

(1)輪詢(xún)效率比較低

(2)每次掃庫(kù),已經(jīng)被執(zhí)行過(guò)記錄剖效,仍然會(huì)被掃描(只是不會(huì)出現(xiàn)在結(jié)果集中)嫉入,有重復(fù)計(jì)算的嫌疑

(3)時(shí)效性不夠好,如果每小時(shí)輪詢(xún)一次璧尸,最差的情況下咒林,時(shí)間誤差會(huì)達(dá)到1小時(shí)

(4)如果通過(guò)增加cron輪詢(xún)頻率來(lái)減少(3)中的時(shí)間誤差,(1)中輪詢(xún)低效和(2)中重復(fù)計(jì)算的問(wèn)題會(huì)進(jìn)一步凸顯

如何利用“延時(shí)消息”爷光,對(duì)于每個(gè)任務(wù)只觸發(fā)一次垫竞,保證效率的同時(shí)保證實(shí)時(shí)性,是今天要討論的問(wèn)題。

二欢瞪、高效延時(shí)消息設(shè)計(jì)與實(shí)現(xiàn)

高效延時(shí)消息活烙,包含兩個(gè)重要的數(shù)據(jù)結(jié)構(gòu):

(1)環(huán)形隊(duì)列,例如可以創(chuàng)建一個(gè)包含3600個(gè)slot的環(huán)形隊(duì)列(本質(zhì)是個(gè)數(shù)組)

(2)任務(wù)集合遣鼓,環(huán)上每一個(gè)slot是一個(gè)Set

同時(shí)啸盏,啟動(dòng)一個(gè)timer,這個(gè)timer每隔1s骑祟,在上述環(huán)形隊(duì)列中移動(dòng)一格回懦,有一個(gè)Current Index指針來(lái)標(biāo)識(shí)正在檢測(cè)的slot。

Task結(jié)構(gòu)中有兩個(gè)很重要的屬性:

(1)Cycle-Num:當(dāng)Current Index第幾圈掃描到這個(gè)Slot時(shí)次企,執(zhí)行任務(wù)

(2)Task-Function:需要執(zhí)行的任務(wù)指針


假設(shè)當(dāng)前Current Index指向第一格粉怕,當(dāng)有延時(shí)消息到達(dá)之后,例如希望3610秒之后抒巢,觸發(fā)一個(gè)延時(shí)消息任務(wù)贫贝,只需:

(1)計(jì)算這個(gè)Task應(yīng)該放在哪一個(gè)slot,現(xiàn)在指向1蛉谜,3610秒之后稚晚,應(yīng)該是第11格,所以這個(gè)Task應(yīng)該放在第11個(gè)slot的Set中

(2)計(jì)算這個(gè)Task的Cycle-Num型诚,由于環(huán)形隊(duì)列是3600格(每秒移動(dòng)一格客燕,正好1小時(shí)),這個(gè)任務(wù)是3610秒后執(zhí)行狰贯,所以應(yīng)該繞3610/3600=1圈之后再執(zhí)行也搓,于是Cycle-Num=1

Current Index不停的移動(dòng),每秒移動(dòng)到一個(gè)新slot涵紊,這個(gè)slot中對(duì)應(yīng)的Set傍妒,每個(gè)Task看Cycle-Num是不是0:

(1)如果不是0,說(shuō)明還需要多移動(dòng)幾圈摸柄,將Cycle-Num減1

(2)如果是0颤练,說(shuō)明馬上要執(zhí)行這個(gè)Task了,取出Task-Funciton執(zhí)行(可以用單獨(dú)的線程來(lái)執(zhí)行Task)驱负,并把這個(gè)Task從Set中刪除

使用了“延時(shí)消息”方案之后嗦玖,“訂單48小時(shí)后關(guān)閉評(píng)價(jià)”的需求,只需將在訂單關(guān)閉時(shí)跃脊,觸發(fā)一個(gè)48小時(shí)之后的延時(shí)消息即可:

(1)無(wú)需再輪詢(xún)?nèi)坑唵斡畲欤矢?/p>

(2)一個(gè)訂單,任務(wù)只執(zhí)行一次

(3)時(shí)效性好酪术,精確到秒(控制timer移動(dòng)頻率可以控制精度)

三器瘪、總結(jié)

環(huán)形隊(duì)列是一個(gè)實(shí)現(xiàn)“延時(shí)消息”的好方法,開(kāi)源的MQ好像都不支持延遲消息,不妨自己實(shí)現(xiàn)一個(gè)簡(jiǎn)易的“延時(shí)消息隊(duì)列”娱局,能解決很多業(yè)務(wù)問(wèn)題彰亥,并減少很多低效掃庫(kù)的cron任務(wù)。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末衰齐,一起剝皮案震驚了整個(gè)濱河市任斋,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌耻涛,老刑警劉巖废酷,帶你破解...
    沈念sama閱讀 216,470評(píng)論 6 501
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異抹缕,居然都是意外死亡澈蟆,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,393評(píng)論 3 392
  • 文/潘曉璐 我一進(jìn)店門(mén)卓研,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)趴俘,“玉大人,你說(shuō)我怎么就攤上這事奏赘×壬粒” “怎么了?”我有些...
    開(kāi)封第一講書(shū)人閱讀 162,577評(píng)論 0 353
  • 文/不壞的土叔 我叫張陵磨淌,是天一觀的道長(zhǎng)疲憋。 經(jīng)常有香客問(wèn)我,道長(zhǎng)梁只,這世上最難降的妖魔是什么缚柳? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 58,176評(píng)論 1 292
  • 正文 為了忘掉前任,我火速辦了婚禮搪锣,結(jié)果婚禮上秋忙,老公的妹妹穿的比我還像新娘。我一直安慰自己淤翔,他們只是感情好翰绊,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,189評(píng)論 6 388
  • 文/花漫 我一把揭開(kāi)白布佩谷。 她就那樣靜靜地躺著旁壮,像睡著了一般。 火紅的嫁衣襯著肌膚如雪谐檀。 梳的紋絲不亂的頭發(fā)上抡谐,一...
    開(kāi)封第一講書(shū)人閱讀 51,155評(píng)論 1 299
  • 那天,我揣著相機(jī)與錄音桐猬,去河邊找鬼麦撵。 笑死,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的免胃。 我是一名探鬼主播音五,決...
    沈念sama閱讀 40,041評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼羔沙!你這毒婦竟也來(lái)了躺涝?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書(shū)人閱讀 38,903評(píng)論 0 274
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤扼雏,失蹤者是張志新(化名)和其女友劉穎坚嗜,沒(méi)想到半個(gè)月后,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體诗充,經(jīng)...
    沈念sama閱讀 45,319評(píng)論 1 310
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡苍蔬,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,539評(píng)論 2 332
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了蝴蜓。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片碟绑。...
    茶點(diǎn)故事閱讀 39,703評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖茎匠,靈堂內(nèi)的尸體忽然破棺而出蜈敢,到底是詐尸還是另有隱情,我是刑警寧澤汽抚,帶...
    沈念sama閱讀 35,417評(píng)論 5 343
  • 正文 年R本政府宣布抓狭,位于F島的核電站,受9級(jí)特大地震影響造烁,放射性物質(zhì)發(fā)生泄漏否过。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,013評(píng)論 3 325
  • 文/蒙蒙 一惭蟋、第九天 我趴在偏房一處隱蔽的房頂上張望苗桂。 院中可真熱鬧,春花似錦告组、人聲如沸煤伟。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 31,664評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)便锨。三九已至,卻和暖如春我碟,著一層夾襖步出監(jiān)牢的瞬間放案,已是汗流浹背。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 32,818評(píng)論 1 269
  • 我被黑心中介騙來(lái)泰國(guó)打工矫俺, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留吱殉,地道東北人掸冤。 一個(gè)月前我還...
    沈念sama閱讀 47,711評(píng)論 2 368
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像友雳,于是被迫代替她去往敵國(guó)和親稿湿。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,601評(píng)論 2 353

推薦閱讀更多精彩內(nèi)容

  • 目錄 場(chǎng)景假設(shè) 調(diào)優(yōu)步驟和方法 Storm 的部分特性 Storm 并行度 Storm 消息機(jī)制 Storm UI...
    mtide閱讀 17,106評(píng)論 30 60
  • 消息隊(duì)列已經(jīng)逐漸成為企業(yè)IT系統(tǒng)內(nèi)部通信的核心手段押赊。它具有低耦合缎罢、可靠投遞、廣播考杉、流量控制策精、最終一致性等一系列功能...
    Sophie12138閱讀 722評(píng)論 0 7
  • Android 自定義View的各種姿勢(shì)1 Activity的顯示之ViewRootImpl詳解 Activity...
    passiontim閱讀 172,072評(píng)論 25 707
  • 延時(shí)任務(wù)有別于定式任務(wù),定式任務(wù)往往是固定周期的崇棠,有明確的觸發(fā)時(shí)間咽袜。而延時(shí)任務(wù)一般沒(méi)有固定的開(kāi)始時(shí)間,它常常是由一...
    jiangmo閱讀 20,150評(píng)論 4 16
  • 20170226 周日 鹽田區(qū) 陰 9-18度 空氣優(yōu) 時(shí)間過(guò)得飛快枕稀,今天已經(jīng)是培訓(xùn)的第四天了询刹。昨天主要學(xué)習(xí)體驗(yàn)了...
    cai彩閱讀 182評(píng)論 0 0