用golang實現(xiàn)mongodb數(shù)據(jù)庫連接池-基本篇

  • 版本
    golang -- 1.12.4
    mongodb -- 4.0
    go driver -- 1.0.0

  • 簡介

mongodb的數(shù)據(jù)庫driver在官方文檔里面明確寫明所有的數(shù)據(jù)庫連接需要自己建立和釋放,而且建議盡量復(fù)用已有的建立瘤泪,那么也就是說driver里面并未實現(xiàn)連接池的功能灶泵。在我們實際應(yīng)用中就需要自己實現(xiàn)這套數(shù)據(jù)庫連接池提升程序和數(shù)據(jù)庫之間的執(zhí)行效率。

  • 設(shè)計思路

用一個數(shù)組來存放數(shù)據(jù)庫連接的指針对途,并記錄每一個指針兩個狀態(tài): a.是否申請了數(shù)據(jù)庫連接 b.這個連接是否已經(jīng)給系統(tǒng)在使用中赦邻。舉個例子就比較好理解了:

  1. 申請一個用于存放數(shù)據(jù)連接的數(shù)組,一開始空的什么都沒有

    pool_initial.png

  2. 程序需要一個數(shù)據(jù)庫連接实檀,連接池把數(shù)組第一個位置建立一個數(shù)據(jù)庫連接惶洲,并把這個連接的狀態(tài)置為:a.已申請 b.已給系統(tǒng)

    pool_create_connection.png

  3. 程序使用完釋放數(shù)據(jù)庫連接按声,現(xiàn)在數(shù)據(jù)庫指針狀態(tài)為:a.已申請 b.未使用

    pool_release_connection.png

  4. 程序需要新申請一個數(shù)據(jù)庫連接,那么就回到了第2的狀態(tài)湃鹊。

  • 核心代碼
const(
    MAX_CONNECTION = 10
    INITIAL_CONNECTION = 4
    AVAILABLE = false
    USED = true

)

/*
代碼取了一個巧儒喊,用實際存放數(shù)據(jù)庫指針的大小ClientPool.size和mongodata.flag來表示上述a镣奋,b兩個狀態(tài)
如果mongodata.flag都為USED币呵,那么需要新申請個數(shù)據(jù)庫連接: size++
clientList: the client pool
clientAvailable: the available flag, means the location and available flag in the  client pool
size: the size of allocated client pool <= MAX_CONNECTION
*/
type mongodata struct{
    client *mongo.Client
    pos int
    flag bool

}

type ClientPool struct{
    clientList [MAX_CONNECTION]mongodata
    size int
}

//create a new database connection to the pool
func (cp *ClientPool) allocateCToPool(pos int) (err error){
    cp.clientList[pos].client, err = Dbconnect()
    if err != nil {
        utils.Logger.SetPrefix("WARNING ")
        utils.Logger.Println("allocateCToPool - allocateCToPool failed,position: ", pos, err)
        return err
    }

    cp.clientList[pos].flag = USED
    cp.clientList[pos].pos = pos
    return nil
}

//apply a connection from the pool
func (cp *ClientPool) getCToPool(pos int){
    cp.clientList[pos].flag = USED
}

//free a connection back to the pool
func (cp *ClientPool) putCBackPool(pos int){
    cp.clientList[pos].flag = AVAILABLE
}

//program apply a database connection
func GetClient() (mongoclient *mongodata,  err error) {
    for i:=1; i<cp.size; i++ {
        if cp.clientList[i].flag == AVAILABLE{
            return &cp.clientList[i], nil
        }
    }

    if cp.size < MAX_CONNECTION{
        err = cp.allocateCToPool(cp.size)
        if err != nil {
            utils.Logger.SetPrefix("WARNING ")
            utils.Logger.Println("GetClient - DB pooling allocate failed", err)
            return nil, err
        }

        pos := cp.size
        cp.size++
        return &cp.clientList[pos], nil
    } else {
        utils.Logger.SetPrefix("WARNING ")
        utils.Logger.Println("GetClient - DB pooling is fulled")
        return nil, errors.New("DB pooling is fulled")
    }

}

//program release a connection
func ReleaseClient(mongoclient *mongodata){
    cp.putCBackPool(mongoclient.pos)
}

以上就是核心代碼實現(xiàn),但是這個代碼有一個問題侨颈,就是在高并發(fā)下并非協(xié)程安全余赢,這個留在下一篇《用golang實現(xiàn)mongodb數(shù)據(jù)庫連接池-高級篇-協(xié)程安全》來優(yōu)化。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末哈垢,一起剝皮案震驚了整個濱河市妻柒,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌耘分,老刑警劉巖举塔,帶你破解...
    沈念sama閱讀 218,682評論 6 507
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異求泰,居然都是意外死亡央渣,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,277評論 3 395
  • 文/潘曉璐 我一進(jìn)店門渴频,熙熙樓的掌柜王于貴愁眉苦臉地迎上來芽丹,“玉大人,你說我怎么就攤上這事卜朗“蔚冢” “怎么了?”我有些...
    開封第一講書人閱讀 165,083評論 0 355
  • 文/不壞的土叔 我叫張陵场钉,是天一觀的道長蚊俺。 經(jīng)常有香客問我,道長逛万,這世上最難降的妖魔是什么春叫? 我笑而不...
    開封第一講書人閱讀 58,763評論 1 295
  • 正文 為了忘掉前任,我火速辦了婚禮泣港,結(jié)果婚禮上暂殖,老公的妹妹穿的比我還像新娘。我一直安慰自己当纱,他們只是感情好呛每,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,785評論 6 392
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著坡氯,像睡著了一般晨横。 火紅的嫁衣襯著肌膚如雪洋腮。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,624評論 1 305
  • 那天手形,我揣著相機(jī)與錄音啥供,去河邊找鬼。 笑死库糠,一個胖子當(dāng)著我的面吹牛伙狐,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播瞬欧,決...
    沈念sama閱讀 40,358評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼贷屎,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了艘虎?” 一聲冷哼從身側(cè)響起唉侄,我...
    開封第一講書人閱讀 39,261評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎野建,沒想到半個月后属划,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,722評論 1 315
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡候生,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,900評論 3 336
  • 正文 我和宋清朗相戀三年同眯,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片陶舞。...
    茶點(diǎn)故事閱讀 40,030評論 1 350
  • 序言:一個原本活蹦亂跳的男人離奇死亡嗽测,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出肿孵,到底是詐尸還是另有隱情唠粥,我是刑警寧澤,帶...
    沈念sama閱讀 35,737評論 5 346
  • 正文 年R本政府宣布停做,位于F島的核電站晤愧,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏蛉腌。R本人自食惡果不足惜官份,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,360評論 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望烙丛。 院中可真熱鬧舅巷,春花似錦、人聲如沸河咽。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,941評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽忘蟹。三九已至飒房,卻和暖如春搁凸,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背狠毯。 一陣腳步聲響...
    開封第一講書人閱讀 33,057評論 1 270
  • 我被黑心中介騙來泰國打工护糖, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人嚼松。 一個月前我還...
    沈念sama閱讀 48,237評論 3 371
  • 正文 我出身青樓嫡良,卻偏偏與公主長得像,于是被迫代替她去往敵國和親惜颇。 傳聞我的和親對象是個殘疾皇子皆刺,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,976評論 2 355