用golang實(shí)現(xiàn)mongodb數(shù)據(jù)庫連接池-高級(jí)篇-協(xié)程安全

  • 版本
    golang -- 1.12.4
    mongodb -- 4.0
    go driver -- 1.0.0

  • 簡介

在上一篇《用golang實(shí)現(xiàn)mongodb數(shù)據(jù)庫連接池-基本篇》我們實(shí)現(xiàn)了mongodb的golang driver按序使用的基本版瓶埋,但還需要進(jìn)一步提升效率和高并發(fā)安全昔头。本篇張實(shí)現(xiàn)高效率協(xié)程安全版擎值。

  • data race

什么是data race袋哼,考慮如下代碼:

var balance int
func Deposit(amount int){ balance = balance + amount}
func Balance() int { return balance}

//Alice:
go func(){
    bank.Deposit(200)                // A1
    fmt.Println("=", bank.Balance()) // A2
}()

//Bob
go bank.Deposit(100)                  // B

當(dāng)alice和bob同時(shí)執(zhí)行如上的操作,最后的存款有幾種可能性刚夺?
根據(jù)直覺會(huì)有3種可能:

alice first bob first alice/bob/alice
0 0 0
A1 200 B 100 A1 200
A2 "=200" A1 300 B 300
B 300 A2 "=300" A2 "=300"

這個(gè)結(jié)果最后存款都是剩余300似乎也沒什么問題献丑,但是這里還有第4種可能,那就是bob的存款操作發(fā)生在A1的balance + amount之后侠姑,但是在A1的balance =之前创橄,那么會(huì)出現(xiàn)什么?

Data | race
:-: | :-: | :-
| 0 |
A1r | 0 | ...=balance + amount
B | 100 |
A1w | 200 | balace = ...
A2 | "=200" |

現(xiàn)在Alice賬戶剩余200莽红,在data race中100被程序沖掉妥畏。

const(
    MAX_CONNECTION = 10
    INITIAL_CONNECTION = 4
    AVAILABLE = false
    USED = true

)

/*
代碼取了一個(gè)巧安吁,用實(shí)際存放數(shù)據(jù)庫指針的大小ClientPool.size和mongodata.flag來表示上述a醉蚁,b兩個(gè)狀態(tài)
如果mongodata.flag都為USED,那么需要新申請(qǐng)個(gè)數(shù)據(jù)庫連接: size++
clientList: the client pool
clientAvailable: the available flag, means the location and available flag in the  client pool
size: the size of allocated client pool <= MAX_CONNECTION
*/
type mongodata struct{
    client *mongo.Client
    pos int
    flag bool

}

type ClientPool struct{
    clientList [MAX_CONNECTION]mongodata
    size int
}

//create a new database connection to the pool
func (cp *ClientPool) allocateCToPool(pos int) (err error){
    cp.clientList[pos].client, err = Dbconnect()
    if err != nil {
        utils.Logger.SetPrefix("WARNING ")
        utils.Logger.Println("allocateCToPool - allocateCToPool failed,position: ", pos, err)
        return err
    }

    cp.clientList[pos].flag = USED
    cp.clientList[pos].pos = pos
    return nil
}

//apply a connection from the pool
func (cp *ClientPool) getCToPool(pos int){
    cp.clientList[pos].flag = USED
}

//free a connection back to the pool
func (cp *ClientPool) putCBackPool(pos int){
    cp.clientList[pos].flag = AVAILABLE
}

//program apply a database connection
func GetClient() (mongoclient *mongodata,  err error) {
    mu.RLock()
    for i:=1; i<cp.size; i++ {
        if cp.clientList[i].flag == AVAILABLE{
            return &cp.clientList[i], nil
        }
    }
    mu.RUnlock()

    mu.Lock()
    defer mu.Unlock()
    if cp.size < MAX_CONNECTION{
        err = cp.allocateCToPool(cp.size)
        if err != nil {
            utils.Logger.SetPrefix("WARNING ")
            utils.Logger.Println("GetClient - DB pooling allocate failed", err)
            return nil, err
        }

        pos := cp.size
        cp.size++
        return &cp.clientList[pos], nil
    } else {
        utils.Logger.SetPrefix("WARNING ")
        utils.Logger.Println("GetClient - DB pooling is fulled")
        return nil, errors.New("DB pooling is fulled")
    }

}

//program release a connection
func ReleaseClient(mongoclient *mongodata){
    mu.Lock()
    cp.putCBackPool(mongoclient.pos)
    mu.Unlock()
}

這樣我們就完成了一個(gè)高效率協(xié)程安全的設(shè)計(jì)鬼店,完整代碼地址: https://github.com/kmnemon/golang-mongodb-pool

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末网棍,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子妇智,更是在濱河造成了極大的恐慌滥玷,老刑警劉巖捌锭,帶你破解...
    沈念sama閱讀 206,126評(píng)論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異罗捎,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)拉盾,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,254評(píng)論 2 382
  • 文/潘曉璐 我一進(jìn)店門桨菜,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人捉偏,你說我怎么就攤上這事倒得。” “怎么了夭禽?”我有些...
    開封第一講書人閱讀 152,445評(píng)論 0 341
  • 文/不壞的土叔 我叫張陵霞掺,是天一觀的道長。 經(jīng)常有香客問我讹躯,道長菩彬,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 55,185評(píng)論 1 278
  • 正文 為了忘掉前任潮梯,我火速辦了婚禮骗灶,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘秉馏。我一直安慰自己耙旦,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,178評(píng)論 5 371
  • 文/花漫 我一把揭開白布萝究。 她就那樣靜靜地躺著免都,像睡著了一般。 火紅的嫁衣襯著肌膚如雪帆竹。 梳的紋絲不亂的頭發(fā)上绕娘,一...
    開封第一講書人閱讀 48,970評(píng)論 1 284
  • 那天,我揣著相機(jī)與錄音馆揉,去河邊找鬼业舍。 笑死,一個(gè)胖子當(dāng)著我的面吹牛升酣,可吹牛的內(nèi)容都是我干的舷暮。 我是一名探鬼主播,決...
    沈念sama閱讀 38,276評(píng)論 3 399
  • 文/蒼蘭香墨 我猛地睜開眼噩茄,長吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼下面!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起绩聘,我...
    開封第一講書人閱讀 36,927評(píng)論 0 259
  • 序言:老撾萬榮一對(duì)情侶失蹤沥割,失蹤者是張志新(化名)和其女友劉穎耗啦,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體机杜,經(jīng)...
    沈念sama閱讀 43,400評(píng)論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡帜讲,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 35,883評(píng)論 2 323
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了椒拗。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片似将。...
    茶點(diǎn)故事閱讀 37,997評(píng)論 1 333
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖蚀苛,靈堂內(nèi)的尸體忽然破棺而出在验,到底是詐尸還是另有隱情,我是刑警寧澤堵未,帶...
    沈念sama閱讀 33,646評(píng)論 4 322
  • 正文 年R本政府宣布腋舌,位于F島的核電站,受9級(jí)特大地震影響渗蟹,放射性物質(zhì)發(fā)生泄漏块饺。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,213評(píng)論 3 307
  • 文/蒙蒙 一雌芽、第九天 我趴在偏房一處隱蔽的房頂上張望刨沦。 院中可真熱鬧,春花似錦膘怕、人聲如沸想诅。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,204評(píng)論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽来破。三九已至,卻和暖如春忘古,著一層夾襖步出監(jiān)牢的瞬間徘禁,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 31,423評(píng)論 1 260
  • 我被黑心中介騙來泰國打工髓堪, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留送朱,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 45,423評(píng)論 2 352
  • 正文 我出身青樓干旁,卻偏偏與公主長得像驶沼,于是被迫代替她去往敵國和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子争群,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,722評(píng)論 2 345