造輪子 | golang | 支持過期時(shí)間的LRU緩存

本文代碼已上傳github隙赁,歡迎交流垦藏。

最近在學(xué)習(xí)go語言,正好有遇到需要使用緩存的地方伞访,于是決定自己造個(gè)輪子掂骏。主要特性如下:

  • 線程安全;
  • 支持被動(dòng)觸發(fā)的過期時(shí)間咐扭;
  • 支持key和value任意類型芭挽;
  • 基于雙向鏈表和hash表實(shí)現(xiàn);

雙向鏈表的插入蝗肪、刪除和元素移動(dòng)效率非常高袜爪,LRU緩存通常都有大量的以上操作。使用hash表來存儲(chǔ)每個(gè)key對(duì)應(yīng)的元素的指針薛闪,避免每次查詢緩存都需要遍歷整個(gè)鏈表辛馆,提高效率。

被動(dòng)的過期的時(shí)間表示并不會(huì)主動(dòng)的刪除緩存中已經(jīng)過期的元素豁延,而是在需要使用的時(shí)候才去檢查是否過期昙篙,如果過期的話再去刪除。

數(shù)據(jù)結(jié)構(gòu)

每個(gè)緩存的元素至少包含兩個(gè):緩存的關(guān)鍵字key诱咏、緩存的數(shù)據(jù)data苔可;為了支持過期時(shí)間,每個(gè)元素還要有一個(gè)值來表示其過期時(shí)間袋狞;另外基于雙向鏈表實(shí)現(xiàn)焚辅,還需要指向前一個(gè)元素和后一個(gè)元素的指針;于是苟鸯,每個(gè)緩存元素的結(jié)構(gòu)定義:

type elem struct {
    key        interface{}
    data       interface{}
    expireTime int64
    next       *elem
    pre        *elem
}

那么對(duì)于整個(gè)緩存來說同蜻,事實(shí)上就是一個(gè)個(gè)元素組成的列表,但是為了更高效的查詢早处,使用一個(gè)hash表來存放key對(duì)應(yīng)的元素的指針湾蔓,提升查詢效率,于是cache的結(jié)構(gòu)定義:

type lrucache struct {
    maxSize   int
    elemCount int
    elemList  map[interface{}]*elem
    first     *elem
    last      *elem
    mu        sync.Mutex
}

保存鏈表首尾元素的指針是為了在淘汰元素和插入元素的時(shí)候更高效砌梆。

基本方法

一個(gè)緩存基本的方法應(yīng)該包括新建緩存默责、添加元素贬循、刪除元素、查詢?cè)亍?/p>

新建緩存

新建一個(gè)緩存實(shí)際上就是新建一個(gè)lrucache結(jié)構(gòu)體傻丝,并對(duì)里面的元素進(jìn)行初始化:

// New create a new lrucache
// size: max number of element
func New(size int) (*lrucache, error) {
    newCache := new(lrucache)
    newCache.maxSize = size
    newCache.elemCount = 0
    newCache.elemList = make(map[interface{}]*elem)
    return newCache, nil
}

入?yún)⒈硎具@個(gè)緩存最多能存放的元素的個(gè)數(shù)甘有,當(dāng)?shù)竭_(dá)最大個(gè)數(shù)的時(shí)候就開始淘汰最久沒使用的元素。

添加元素

添加元素使用Set方法來實(shí)現(xiàn)葡缰,如果緩存中已經(jīng)存在該key,就更新值忱反;否則新建一個(gè)緩存元素并保存泛释。過期時(shí)間是可選的,如果沒傳入過期時(shí)間温算,這個(gè)元素就會(huì)一直存在知道被淘汰怜校。

// Set create or update an element using key
//      key:    The identity of an element
//      value:  new value of the element
//      ttl:    expire time, unit: second
func (c *lrucache) Set(key interface{}, value interface{}, ttl ...int) error {

    // Ensure ttl are correct
    if len(ttl) > 1 {
        return errors.New("wrong para number, 2 or 3 expected but more than 3 received")
    }
    var elemTTL int64
    if len(ttl) == 1 {
        elemTTL = int64(ttl[0])
    } else {
        elemTTL = -1
    }

    c.mu.Lock()
    defer c.mu.Unlock()

    if e, ok := c.elemList[key]; ok {
        e.data = value
        if elemTTL == -1 {
            e.expireTime = elemTTL
        } else {
            e.expireTime = time.Now().Unix() + elemTTL
        }
        c.mvKeyToFirst(key)
    } else {
        if c.elemCount+1 > c.maxSize {
            if c.checkExpired() <= 0 {
                c.eliminationOldest()
            }
        }
        newElem := &elem{
            key:        key,
            data:       value,
            expireTime: -1,
            pre:        nil,
            next:       c.first,
        }
        if elemTTL != -1 {
            newElem.expireTime = time.Now().Unix() + elemTTL
        }
        if c.first != nil {
            c.first.pre = newElem
        }
        c.first = newElem
        c.elemList[key] = newElem

        c.elemCount++
    }
    return nil
}

如果一個(gè)key已經(jīng)存在就更新它所對(duì)應(yīng)的值,并將這個(gè)key對(duì)應(yīng)的元素移動(dòng)到鏈表的最前面注竿;如果key不存在就需要新建一個(gè)鏈表元素茄茁,流程如下:

新增key流程圖

由于采用的是過期時(shí)間是被動(dòng)觸發(fā)的方式,因此在元素滿的時(shí)候并不能確定是否存在過期的元素巩割,因此目前采用的方式是裙顽,當(dāng)滿了之后每次新增元素就去遍歷的檢查一次過期的元素,時(shí)間復(fù)雜度為O(n)宣谈,感覺這種實(shí)現(xiàn)方式不太好愈犹,但是目前沒想到更好的實(shí)現(xiàn)方式。

上面使用到的內(nèi)部方法實(shí)現(xiàn)如下:

// updateKeyPtr 更新對(duì)應(yīng)key的指針闻丑,放到鏈表的第一個(gè)
func (c *lrucache) mvKeyToFirst(key interface{}) {
    elem := c.elemList[key]
    if elem.pre == nil {
        // 當(dāng)key是第一個(gè)元素時(shí)扩劝,不做動(dòng)作
        return
    } else if elem.next == nil {
        // 當(dāng)key不是第一個(gè)元素炕檩,但是是最后一個(gè)元素時(shí),提到第一個(gè)元素去
        elem.pre.next = nil

        c.last = elem.pre

        elem.pre = nil
        elem.next = c.first
        c.first = elem

    } else {
        elem.pre.next = elem.next
        elem.next.pre = elem.pre

        elem.next = c.first
        elem.pre = nil
        c.first = elem
    }
}

func (c *lrucache) eliminationOldest() {
    if c.last == nil {
        return
    }
    if c.last.pre != nil {
        c.last.pre.next = nil
    }
    key := c.last.key
    c.last = c.last.pre
    delete(c.elemList, key)
}

func (c *lrucache) deleteByKey(key interface{}) {
    if v, ok := c.elemList[key]; ok {
        if v.pre == nil && v.next == nil {
            // 當(dāng)key是第一個(gè)元素時(shí),清空元素列表扛禽,充值指針和元素計(jì)數(shù)
            c.elemList = make(map[interface{}]*elem)
            c.elemCount = 0
            c.last = nil
            c.first = nil
            return
        } else if v.next == nil {
            // 當(dāng)key不是第一個(gè)元素,但是是最后一個(gè)元素時(shí),修改前一個(gè)元素的next指針并修改c.last指針
            v.pre.next = v.next
            c.last = v.pre
        } else if v.pre == nil {
            c.first = v.next
            c.first.pre = nil
        } else {
            // 中間元素秩霍,修改前后指針
            v.pre.next = v.next
            v.next.pre = v.pre
        }
        delete(c.elemList, key)
        c.elemCount--
    }
}

// 遍歷鏈表齐婴,檢查并刪除已經(jīng)過期的元素
func (c *lrucache) checkExpired() int {
    now := time.Now().Unix()
    tmp := c.first
    count := 0
    for tmp != nil {
        if tmp.expireTime != -1 && now > tmp.expireTime {
            c.deleteByKey(tmp.key)
            count++
        }
        tmp = tmp.next
    }
    return count
}

獲取元素

使用Get方法來獲取嘗試獲取一個(gè)緩存的元素,在獲取的時(shí)候同時(shí)會(huì)檢查是否過期卑硫,如果過期的話會(huì)返回響應(yīng)的錯(cuò)誤并刪掉該元素:

// Get Get the value of a cached element by key. If key do not exist, this function will return nil and a error msg
//      key:    The identity of an element
//      return:
//          value:  the cached value, nil if key do not exist
//          err:    error info, nil if value is not nil
func (c *lrucache) Get(key interface{}) (value interface{}, err error) {
    if v, ok := c.elemList[key]; ok {
        if v.expireTime != -1 && time.Now().Unix() > v.expireTime {
            // 如果過期了
            c.deleteByKey(key)
            return nil, errors.New("the key was expired")
        }
        c.mvKeyToFirst(key)
        return v.data, nil
    }
    return nil, errors.New("no value found")
}

刪除元素

刪除元素通過Delete來實(shí)現(xiàn)徒恋,實(shí)際上在之前的內(nèi)部方法中已經(jīng)實(shí)現(xiàn)了刪除一個(gè)元素的功能,只需要封裝給外部調(diào)用即可:

// Delete delete an element
func (c *lrucache) Delete(key interface{}) error {
    c.mu.Lock()
    defer c.mu.Unlock()
    if _, ok := c.elemList[key]; !ok {
        return errors.New(fmt.Sprintf("key %T do not exist", key))
    }
    c.deleteByKey(key)
    return nil
}

算是熟悉了go語言的基本使用欢伏,但是還有很多需要優(yōu)化的地方入挣,比如優(yōu)化Set方法的效率,使用讀寫鎖替換互斥鎖硝拧。径筏。葛假。。
歡迎討論滋恬。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末聊训,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子恢氯,更是在濱河造成了極大的恐慌带斑,老刑警劉巖,帶你破解...
    沈念sama閱讀 216,496評(píng)論 6 501
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件勋拟,死亡現(xiàn)場(chǎng)離奇詭異勋磕,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)敢靡,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,407評(píng)論 3 392
  • 文/潘曉璐 我一進(jìn)店門挂滓,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人啸胧,你說我怎么就攤上這事赶站。” “怎么了纺念?”我有些...
    開封第一講書人閱讀 162,632評(píng)論 0 353
  • 文/不壞的土叔 我叫張陵贝椿,是天一觀的道長。 經(jīng)常有香客問我柠辞,道長团秽,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,180評(píng)論 1 292
  • 正文 為了忘掉前任叭首,我火速辦了婚禮习勤,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘焙格。我一直安慰自己图毕,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,198評(píng)論 6 388
  • 文/花漫 我一把揭開白布眷唉。 她就那樣靜靜地躺著予颤,像睡著了一般。 火紅的嫁衣襯著肌膚如雪冬阳。 梳的紋絲不亂的頭發(fā)上蛤虐,一...
    開封第一講書人閱讀 51,165評(píng)論 1 299
  • 那天,我揣著相機(jī)與錄音肝陪,去河邊找鬼驳庭。 笑死,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的饲常。 我是一名探鬼主播蹲堂,決...
    沈念sama閱讀 40,052評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼贝淤!你這毒婦竟也來了柒竞?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 38,910評(píng)論 0 274
  • 序言:老撾萬榮一對(duì)情侶失蹤播聪,失蹤者是張志新(化名)和其女友劉穎朽基,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體离陶,經(jīng)...
    沈念sama閱讀 45,324評(píng)論 1 310
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡踩晶,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,542評(píng)論 2 332
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了枕磁。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 39,711評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡术吝,死狀恐怖计济,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情排苍,我是刑警寧澤沦寂,帶...
    沈念sama閱讀 35,424評(píng)論 5 343
  • 正文 年R本政府宣布,位于F島的核電站淘衙,受9級(jí)特大地震影響传藏,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜彤守,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,017評(píng)論 3 326
  • 文/蒙蒙 一毯侦、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧具垫,春花似錦侈离、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,668評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至起宽,卻和暖如春洲胖,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背坯沪。 一陣腳步聲響...
    開封第一講書人閱讀 32,823評(píng)論 1 269
  • 我被黑心中介騙來泰國打工绿映, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人屏箍。 一個(gè)月前我還...
    沈念sama閱讀 47,722評(píng)論 2 368
  • 正文 我出身青樓绘梦,卻偏偏與公主長得像橘忱,于是被迫代替她去往敵國和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子卸奉,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,611評(píng)論 2 353

推薦閱讀更多精彩內(nèi)容