Redis(3):Redis數(shù)據(jù)庫(kù)結(jié)構(gòu)以及鍵值刪除策略

Redis的數(shù)據(jù)庫(kù)結(jié)構(gòu),結(jié)構(gòu)為

typedef struct redisDb {
    dict *dict;                 /* The keyspace for this DB */
    dict *expires;              /* Timeout of keys with a timeout set */
    dict *blocking_keys;        /* Keys with clients waiting for data (BLPOP) */
    dict *ready_keys;           /* Blocked keys that received a PUSH */
    dict *watched_keys;         /* WATCHED keys for MULTI/EXEC CAS */
    struct evictionPoolEntry *eviction_pool;    /* Eviction pool of keys */
    int id;                     /* Database ID */
    long long avg_ttl;          /* Average TTL, just for stats */
} redisDb;

Redis是一個(gè)KV類(lèi)型的數(shù)據(jù)庫(kù)油昂,比較重要的屬性為(dict,expires)

  • dict:保存了數(shù)據(jù)庫(kù)里面所有的鍵值對(duì)

他是key都是字符串類(lèi)型倾贰,值的話是對(duì)應(yīng)的對(duì)象(字符串冕碟,列表,hash匆浙,set安寺,zset)

  • expires:保存了所有key值的到期時(shí)間,定期刪除也是基于這張表做的
存在過(guò)期鍵值的數(shù)據(jù)庫(kù)例子

Redis過(guò)期鍵刪除策略(惰性刪除首尼、定期刪除挑庶、主動(dòng)清除)

  • 惰性刪除

在獲取(寫(xiě)操作之前也會(huì)先讀取一下)這個(gè)key的時(shí)候判斷鍵是否過(guò)期言秸,如果過(guò)期的話就進(jìn)行刪除,并且返回空

  • 定期刪除

它在規(guī)定的時(shí)間內(nèi)挠羔,分多次遍歷服務(wù)器中的各個(gè)數(shù)據(jù)庫(kù)井仰,從數(shù)據(jù)庫(kù)的expires 字典中隨機(jī)檢查一部分鍵的過(guò)期時(shí)間,并刪除其中的過(guò)期鍵破加。

  • 主動(dòng)清理(當(dāng)前已用內(nèi)存超過(guò)maxmemory限定時(shí),觸發(fā)主動(dòng)清理策略)
在介紹刪除策略之前先了解一下刪除算法雹嗦,LRU跟LFU
  1. LRU(Least Recently Used范舀,最久未使用的)以最近一次訪問(wèn)時(shí)間作為參考,淘汰很久沒(méi)被訪問(wèn)過(guò)的數(shù)據(jù)了罪,
  2. LFU(Least Frequently Used锭环,最不頻繁使用的)以訪問(wèn)次數(shù)作為參考,淘汰最近一段時(shí)間被訪問(wèn)次數(shù)最少的數(shù)據(jù)
主動(dòng)刪除策略泊藕,主要有3個(gè)維度(a:對(duì)key有設(shè)置過(guò)期時(shí)間的 b:所有key辅辩,c:不處理)

(a) 針對(duì)設(shè)置了過(guò)期時(shí)間的key做處理:

  1. volatile-ttl(time-to-live):在篩選時(shí),會(huì)針對(duì)設(shè)置了過(guò)期時(shí)間的鍵值對(duì)娃圆,根據(jù)過(guò)期時(shí)間的先后進(jìn)行刪除玫锋,越早過(guò)期的越先被刪除。
  2. volatile-random:就像它的名稱(chēng)一樣讼呢,在設(shè)置了過(guò)期時(shí)間的鍵值對(duì)中撩鹿,進(jìn)行隨機(jī)刪除。
  3. volatile-lru:會(huì)使用 LRU 算法篩選設(shè)置了過(guò)期時(shí)間的鍵值對(duì)刪除悦屏。
  4. volatile-lfu:會(huì)使用 LFU 算法篩選設(shè)置了過(guò)期時(shí)間的鍵值對(duì)刪除节沦。

(b) 針對(duì)所有的key做處理:

  1. allkeys-random:從所有鍵值對(duì)中隨機(jī)選擇并刪除數(shù)據(jù)。
  2. allkeys-lru:使用 LRU 算法在所有數(shù)據(jù)中進(jìn)行篩選刪除础爬。
  3. allkeys-lfu:使用 LFU 算法在所有數(shù)據(jù)中進(jìn)行篩選刪除甫贯。

(c) 不處理:

  1. noeviction:不會(huì)剔除任何數(shù)據(jù),拒絕所有寫(xiě)入操作并返回客戶端錯(cuò)誤信息"(error)
主動(dòng)刪除策略配置建議

當(dāng)存在熱點(diǎn)數(shù)據(jù)時(shí)看蚜,LRU的效率很好叫搁,但偶發(fā)性的、周期性的批量操作會(huì)導(dǎo)致LRU命中率急劇下
降失乾,緩存污染情況比較嚴(yán)重常熙。這時(shí)使用LFU可能更好點(diǎn)。
根據(jù)自身業(yè)務(wù)類(lèi)型碱茁,配置好maxmemory-policy(默認(rèn)是noeviction)裸卫,推薦使用volatile-lru。如
果不設(shè)置最大內(nèi)存纽竣,當(dāng) Redis 內(nèi)存超出物理內(nèi)存限制時(shí)墓贿,內(nèi)存的數(shù)據(jù)會(huì)開(kāi)始和磁盤(pán)產(chǎn)生頻繁的交
換 (swap)茧泪,會(huì)讓 Redis 的性能急劇下降。
當(dāng)Redis運(yùn)行在主從模式時(shí)聋袋,只有主結(jié)點(diǎn)才會(huì)執(zhí)行過(guò)期刪除策略队伟,然后把刪除操作”del key”同
步到從結(jié)點(diǎn)刪除數(shù)據(jù)。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末幽勒,一起剝皮案震驚了整個(gè)濱河市嗜侮,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌啥容,老刑警劉巖锈颗,帶你破解...
    沈念sama閱讀 216,372評(píng)論 6 498
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異咪惠,居然都是意外死亡击吱,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,368評(píng)論 3 392
  • 文/潘曉璐 我一進(jìn)店門(mén)遥昧,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)覆醇,“玉大人,你說(shuō)我怎么就攤上這事炭臭∮琅В” “怎么了?”我有些...
    開(kāi)封第一講書(shū)人閱讀 162,415評(píng)論 0 353
  • 文/不壞的土叔 我叫張陵徽缚,是天一觀的道長(zhǎng)憨奸。 經(jīng)常有香客問(wèn)我,道長(zhǎng)凿试,這世上最難降的妖魔是什么排宰? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 58,157評(píng)論 1 292
  • 正文 為了忘掉前任,我火速辦了婚禮那婉,結(jié)果婚禮上板甘,老公的妹妹穿的比我還像新娘。我一直安慰自己详炬,他們只是感情好盐类,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,171評(píng)論 6 388
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著呛谜,像睡著了一般在跳。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上隐岛,一...
    開(kāi)封第一講書(shū)人閱讀 51,125評(píng)論 1 297
  • 那天猫妙,我揣著相機(jī)與錄音,去河邊找鬼聚凹。 笑死割坠,一個(gè)胖子當(dāng)著我的面吹牛齐帚,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播彼哼,決...
    沈念sama閱讀 40,028評(píng)論 3 417
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼对妄,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了敢朱?” 一聲冷哼從身側(cè)響起剪菱,我...
    開(kāi)封第一講書(shū)人閱讀 38,887評(píng)論 0 274
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎拴签,沒(méi)想到半個(gè)月后琅豆,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,310評(píng)論 1 310
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡篓吁,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,533評(píng)論 2 332
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了蚪拦。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片杖剪。...
    茶點(diǎn)故事閱讀 39,690評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖驰贷,靈堂內(nèi)的尸體忽然破棺而出盛嘿,到底是詐尸還是另有隱情,我是刑警寧澤括袒,帶...
    沈念sama閱讀 35,411評(píng)論 5 343
  • 正文 年R本政府宣布次兆,位于F島的核電站,受9級(jí)特大地震影響锹锰,放射性物質(zhì)發(fā)生泄漏芥炭。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,004評(píng)論 3 325
  • 文/蒙蒙 一恃慧、第九天 我趴在偏房一處隱蔽的房頂上張望园蝠。 院中可真熱鬧,春花似錦痢士、人聲如沸彪薛。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 31,659評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)善延。三九已至,卻和暖如春城侧,著一層夾襖步出監(jiān)牢的瞬間易遣,已是汗流浹背。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 32,812評(píng)論 1 268
  • 我被黑心中介騙來(lái)泰國(guó)打工赞庶, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留训挡,地道東北人澳骤。 一個(gè)月前我還...
    沈念sama閱讀 47,693評(píng)論 2 368
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像澜薄,于是被迫代替她去往敵國(guó)和親为肮。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,577評(píng)論 2 353

推薦閱讀更多精彩內(nèi)容