【Guava】使用Guava的RateLimiter做限流

一腥泥、常見(jiàn)的限流算法

目前常用的限流算法有兩個(gè):漏桶算法和令牌桶算法蛔外。

1.漏桶算法

漏桶算法的原理比較簡(jiǎn)單蛆楞,請(qǐng)求進(jìn)入到漏桶中豹爹,漏桶以一定的速率漏水帅戒。當(dāng)請(qǐng)求過(guò)多時(shí)崖技,水直接溢出迎献∮趸校可以看出播演,漏桶算法可以強(qiáng)制限制數(shù)據(jù)的傳輸速度写烤。

image

2.令牌桶算法

令牌桶算法的原理是系統(tǒng)以一定速率向桶中放入令牌,如果有請(qǐng)求時(shí)感局,請(qǐng)求會(huì)從桶中取出令牌询微,如果能取到令牌狂巢,則可以繼續(xù)完成請(qǐng)求,否則等待或者拒絕服務(wù)藻雌。這種算法可以應(yīng)對(duì)突發(fā)程度的請(qǐng)求疹吃,因此比漏桶算法好。

image

在 Wikipedia 上歉摧,令牌桶算法是這么描述的:

  • 每秒會(huì)有 r 個(gè)令牌放入桶中叁温,或者說(shuō),每過(guò) 1/r 秒桶中增加一個(gè)令牌
  • 桶中最多存放 b 個(gè)令牌冲九,如果桶滿了莺奸,新放入的令牌會(huì)被丟棄
  • 當(dāng)一個(gè) n 字節(jié)的數(shù)據(jù)包到達(dá)時(shí)冀宴,消耗 n 個(gè)令牌略贮,然后發(fā)送該數(shù)據(jù)包
  • 如果桶中可用令牌小于 n逃延,則該數(shù)據(jù)包將被緩存或丟棄

二、RateLimiter

Guava中開(kāi)源出來(lái)一個(gè)令牌桶算法的工具類RateLimiter讽膏,可以輕松實(shí)現(xiàn)限流的工作桅打。RateLimiter 對(duì)簡(jiǎn)單的令牌桶算法做了一些工程上的優(yōu)化挺尾,具體的實(shí)現(xiàn)是 SmoothBursty站绪。需要注意的是,RateLimiter 的另一個(gè)實(shí)現(xiàn) SmoothWarmingUp魂挂,就不是令牌桶了涂召,而是漏桶算法果正。也許是出于簡(jiǎn)單起見(jiàn),RateLimiter 中的時(shí)間窗口能且僅能為 1s潦闲,如果想搞其他時(shí)間單位的限流迫皱,只能另外造輪子。

RateLimiter 有一個(gè)有趣的特性是「前人挖坑后人跳」和敬,也就是說(shuō) RateLimiter 允許某次請(qǐng)求拿走超出剩余令牌數(shù)的令牌概龄,但是下一次請(qǐng)求將為此付出代價(jià),一直等到令牌虧空補(bǔ)上,并且桶中有足夠本次請(qǐng)求使用的令牌為止蚕键。這里面就涉及到一個(gè)權(quán)衡,是讓前一次請(qǐng)求干等到令牌夠用才走掉呢锣光,還是讓它先走掉后面的請(qǐng)求等一等呢笆怠?Guava 的設(shè)計(jì)者選擇的是后者,先把眼前的活干了誊爹,后面的事后面再說(shuō)蹬刷。

測(cè)試代碼:

public class RateLimiterMain {
    public static void main(String[] args) {
        RateLimiter rateLimiter = RateLimiter.create(2);
        System.out.println(rateLimiter.acquire(5));
        System.out.println(rateLimiter.acquire(2));
        System.out.println(rateLimiter.acquire(1));
    }
}

輸出內(nèi)容:

0.0
2.496889
0.992149

可以看出,令牌桶每秒只能產(chǎn)生2個(gè)令牌频丘,我們可以第一次取出5個(gè)办成,但是第二個(gè)再去取令牌的時(shí)候,需要等2.5s搂漠,也就是第一次令牌取完后迂卢,需要等2.5s才能取到令牌。同樣的桐汤,第三次取1個(gè)令牌的時(shí)候而克,也需要等待第二次的1s的時(shí)間。也就是怔毛,取的速率可以超過(guò)令牌產(chǎn)生的速率螃壤,但是下一次再次去取的時(shí)候,需要阻塞等待蚁滋。

當(dāng)然也可以使用tryAcquire來(lái)非阻塞的獲取,可以實(shí)時(shí)返回結(jié)果。另外tryAcquire也可以傳入?yún)?shù),也就是等待的時(shí)間塞绿,超時(shí)直接返回false喜庞。這點(diǎn)等同于常見(jiàn)的lock雷猪,tryLock。

三、并發(fā)控制Semaphore

一般來(lái)說(shuō),在網(wǎng)關(guān)系統(tǒng)中簸搞,還有一個(gè)參數(shù)叫并發(fā)控制,就是某一個(gè)資源可以被同時(shí)訪問(wèn)的個(gè)數(shù)。這種情況下垦细,我們可以使用Semaphore來(lái)控制家坎。

Semaphore不同于互斥鎖。互斥鎖是某個(gè)資源只能支持同時(shí)一個(gè)訪問(wèn)穿扳,而Semaphore可以支持多個(gè)訪問(wèn)跪但,但是加上了總數(shù)的控制。

感興趣的同學(xué)可以繼續(xù)深入了解Semaphore的使用。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌匈庭,老刑警劉巖衷咽,帶你破解...
    沈念sama閱讀 221,635評(píng)論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異相寇,居然都是意外死亡唤衫,警方通過(guò)查閱死者的電腦和手機(jī)赃承,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,543評(píng)論 3 399
  • 文/潘曉璐 我一進(jìn)店門(mén)毡咏,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)恢总,“玉大人厢岂,你說(shuō)我怎么就攤上這事卒茬。” “怎么了?”我有些...
    開(kāi)封第一講書(shū)人閱讀 168,083評(píng)論 0 360
  • 文/不壞的土叔 我叫張陵盾剩,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我挤巡,道長(zhǎng)瀑晒,這世上最難降的妖魔是什么椎咧? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 59,640評(píng)論 1 296
  • 正文 為了忘掉前任向臀,我火速辦了婚禮诸狭,結(jié)果婚禮上芹彬,老公的妹妹穿的比我還像新娘。我一直安慰自己蔚万,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 68,640評(píng)論 6 397
  • 文/花漫 我一把揭開(kāi)白布裁眯。 她就那樣靜靜地躺著,像睡著了一般商乎。 火紅的嫁衣襯著肌膚如雪央拖。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書(shū)人閱讀 52,262評(píng)論 1 308
  • 那天鹉戚,我揣著相機(jī)與錄音鲜戒,去河邊找鬼。 笑死崩瓤,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的踩官。 我是一名探鬼主播却桶,決...
    沈念sama閱讀 40,833評(píng)論 3 421
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了颖系?” 一聲冷哼從身側(cè)響起嗅剖,我...
    開(kāi)封第一講書(shū)人閱讀 39,736評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎嘁扼,沒(méi)想到半個(gè)月后信粮,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 46,280評(píng)論 1 319
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡趁啸,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,369評(píng)論 3 340
  • 正文 我和宋清朗相戀三年强缘,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片不傅。...
    茶點(diǎn)故事閱讀 40,503評(píng)論 1 352
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡旅掂,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出访娶,到底是詐尸還是另有隱情商虐,我是刑警寧澤,帶...
    沈念sama閱讀 36,185評(píng)論 5 350
  • 正文 年R本政府宣布崖疤,位于F島的核電站秘车,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏劫哼。R本人自食惡果不足惜叮趴,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,870評(píng)論 3 333
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望沦偎。 院中可真熱鬧疫向,春花似錦、人聲如沸豪嚎。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 32,340評(píng)論 0 24
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)侈询。三九已至舌涨,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間扔字,已是汗流浹背囊嘉。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 33,460評(píng)論 1 272
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留革为,地道東北人扭粱。 一個(gè)月前我還...
    沈念sama閱讀 48,909評(píng)論 3 376
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像震檩,于是被迫代替她去往敵國(guó)和親琢蛤。 傳聞我的和親對(duì)象是個(gè)殘疾皇子蜓堕,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,512評(píng)論 2 359

推薦閱讀更多精彩內(nèi)容

  • 聊聊高并發(fā)系統(tǒng)限流特技-1來(lái)自開(kāi)濤的博客 在開(kāi)發(fā)高并發(fā)系統(tǒng)時(shí)有三把利器用來(lái)保護(hù)系統(tǒng):緩存、降級(jí)和限流博其。緩存的目的是...
    meng_philip123閱讀 6,647評(píng)論 1 20
  • 最近一直都在研究壓力測(cè)試客戶端的問(wèn)題套才,如果突破客戶端壓力測(cè)試線程,端口等問(wèn)題慕淡,如果服務(wù)器端處理網(wǎng)絡(luò)請(qǐng)求處理不過(guò)來(lái)背伴,...
    望月成三人閱讀 8,654評(píng)論 1 25
  • 摘要:在開(kāi)發(fā)高并發(fā)系統(tǒng)時(shí)有三把利器用來(lái)保護(hù)系統(tǒng):緩存、降級(jí)和限流峰髓。而有些場(chǎng)景并不能用緩存和降級(jí)來(lái)解決傻寂,因此需有一種...
    落羽成霜丶閱讀 2,152評(píng)論 0 18
  • 一、問(wèn)題起因 前幾天在面試的時(shí)候儿普,因?yàn)槲乙郧坝袀€(gè)B2B訂貨平臺(tái)(saas系統(tǒng)架構(gòu)崎逃,平臺(tái)給每個(gè)租戶,提供完全獨(dú)立的在...
    xtg閱讀 7,842評(píng)論 1 10
  • 本周總體總結(jié) 本周給自己打8分吧眉孩,唯一一件事情未完成的是个绍,公眾號(hào)的三篇文章,只完成了1篇浪汪。要打屁股啊巴柿,說(shuō)到?jīng)]有做到...
    羽青閱讀 181評(píng)論 0 0