SingleFlight-- 合并相同請求

SingleFlight的作用是在處理多個goroutine同時調(diào)用同一個函數(shù)的時候椎侠,只讓一個goroutine去實(shí)際調(diào)用這個函數(shù),等到這個goroutine返回結(jié)果的時候措拇,再把結(jié)果返回給其他幾個同時調(diào)用了相同函數(shù)的goroutine我纪,這樣可以減少并發(fā)調(diào)用的數(shù)量。在實(shí)際應(yīng)用中也是丐吓,它能夠在一個服務(wù)中減少對下游的并發(fā)重復(fù)請求浅悉。還有一個比較常見的使用場景是用來防止緩存擊穿。
Go擴(kuò)展庫里用singleflight.Group結(jié)構(gòu)體類型提供了SingleFlight并發(fā)原語的功能券犁。
singleflight.Group類型提供了三個方法:

func (g *Group) Do(key string, fn func() (interface{}, error)) (v interface{}, err error, shared bool)

func (g *Group) DoChan(key string, fn func() (interface{}, error)) <-chan Result

func (g *Group) Forget(key string)

Do方法术健,接受一個字符串Key和一個待調(diào)用的函數(shù),會返回調(diào)用函數(shù)的結(jié)果和錯誤粘衬。使用Do方法的時候荞估,它會根據(jù)提供的Key判斷是否去真正調(diào)用fn函數(shù)咳促。同一個 key,在同一時間只有第一次調(diào)用Do方法時才會去執(zhí)行fn函數(shù)勘伺,其他并發(fā)的請求會等待調(diào)用的執(zhí)行結(jié)果跪腹。
DoChan方法:類似Do方法,只不過是一個異步調(diào)用飞醉。它會返回一個通道冲茸,等fn函數(shù)執(zhí)行完,產(chǎn)生了結(jié)果以后缅帘,就能從這個 chan 中接收這個結(jié)果轴术。
Forget方法:在SingleFlight中刪除一個Key。這樣一來钦无,之后這個Key的Do方法調(diào)用會執(zhí)行fn函數(shù)逗栽,而不是等待前一個未完成的fn 函數(shù)的結(jié)果。

使用緩存時铃诬,一個常見的用法是查詢一個數(shù)據(jù)先去查詢緩存祭陷,如果沒有就去數(shù)據(jù)庫里查到數(shù)據(jù)并緩存到Redis里。緩存擊穿問題是指趣席,高并發(fā)的系統(tǒng)中,大量的請求同時查詢一個緩存Key 時醇蝴,如果這個 Key 正好過期失效宣肚,就會導(dǎo)致大量的請求都打到數(shù)據(jù)庫上,這就是緩存擊穿悠栓。用 SingleFlight 來解決緩存擊穿問題再合適不過霉涨,這個時候只要這些對同一個 Key 的并發(fā)請求的其中一個到數(shù)據(jù)庫中查詢就可以了,這些并發(fā)的請求可以共享同一個結(jié)果惭适。
下面是一個模擬用SingleFlight并發(fā)原語合并查詢Redis緩存的程序笙瑟,觀察一下運(yùn)行的返回結(jié)果就會發(fā)現(xiàn)最終只執(zhí)行了一次Redis查詢。

package main

import (
   "fmt"
   "golang.org/x/sync/singleflight"
   "sync"
   "time"
)

// 模擬一個Redis客戶端
type client struct {
   // ... 其他的配置省略
   requestGroup singleflight.Group
}

// 普通查詢
func (c *client) Get(key string) (interface{}, error) {
   fmt.Println("Querying Database")
   time.Sleep(time.Second)
   v := "Content of key" + key
   return v, nil
}

// SingleFlight查詢
func (c *client) SingleFlightGet(key string) (interface{}, error) {
   v, err, _ := c.requestGroup.Do(key, func() (interface{}, error) {
      return c.Get(key)

   })
   if err != nil {
      return nil, err
   }
   return v, err
}

func main() {
   redisClient := new(client)
   wg := sync.WaitGroup{}
   wg.Add(10)
   for i := 0; i < 10; i++ {

      go func() {
         defer wg.Done()
         v, _ := redisClient.SingleFlightGet("Cyberpunk2077!!!")
         fmt.Println(v)
      }()
   }
   wg.Wait()
}
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末癞志,一起剝皮案震驚了整個濱河市往枷,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌凄杯,老刑警劉巖错洁,帶你破解...
    沈念sama閱讀 219,366評論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異戒突,居然都是意外死亡屯碴,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,521評論 3 395
  • 文/潘曉璐 我一進(jìn)店門膊存,熙熙樓的掌柜王于貴愁眉苦臉地迎上來导而,“玉大人忱叭,你說我怎么就攤上這事〗褚眨” “怎么了窑多?”我有些...
    開封第一講書人閱讀 165,689評論 0 356
  • 文/不壞的土叔 我叫張陵,是天一觀的道長洼滚。 經(jīng)常有香客問我埂息,道長,這世上最難降的妖魔是什么遥巴? 我笑而不...
    開封第一講書人閱讀 58,925評論 1 295
  • 正文 為了忘掉前任千康,我火速辦了婚禮,結(jié)果婚禮上铲掐,老公的妹妹穿的比我還像新娘拾弃。我一直安慰自己,他們只是感情好摆霉,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,942評論 6 392
  • 文/花漫 我一把揭開白布豪椿。 她就那樣靜靜地躺著,像睡著了一般携栋。 火紅的嫁衣襯著肌膚如雪搭盾。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,727評論 1 305
  • 那天婉支,我揣著相機(jī)與錄音鸯隅,去河邊找鬼。 笑死向挖,一個胖子當(dāng)著我的面吹牛蝌以,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播何之,決...
    沈念sama閱讀 40,447評論 3 420
  • 文/蒼蘭香墨 我猛地睜開眼跟畅,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了溶推?” 一聲冷哼從身側(cè)響起徊件,我...
    開封第一講書人閱讀 39,349評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎悼潭,沒想到半個月后庇忌,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,820評論 1 317
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡舰褪,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,990評論 3 337
  • 正文 我和宋清朗相戀三年皆疹,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片占拍。...
    茶點(diǎn)故事閱讀 40,127評論 1 351
  • 序言:一個原本活蹦亂跳的男人離奇死亡略就,死狀恐怖捎迫,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情表牢,我是刑警寧澤窄绒,帶...
    沈念sama閱讀 35,812評論 5 346
  • 正文 年R本政府宣布,位于F島的核電站崔兴,受9級特大地震影響彰导,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜敲茄,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,471評論 3 331
  • 文/蒙蒙 一位谋、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧堰燎,春花似錦掏父、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,017評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至仅讽,卻和暖如春陶缺,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背何什。 一陣腳步聲響...
    開封第一講書人閱讀 33,142評論 1 272
  • 我被黑心中介騙來泰國打工组哩, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人处渣。 一個月前我還...
    沈念sama閱讀 48,388評論 3 373
  • 正文 我出身青樓,卻偏偏與公主長得像蛛砰,于是被迫代替她去往敵國和親罐栈。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,066評論 2 355