《redis設(shè)計(jì)與實(shí)現(xiàn)》筆記

記錄閱讀這本書時(shí)覺得有用的東西幔崖,也許很零散食店。(第一部分)

字符串

redis的字符串底層實(shí)現(xiàn)為簡(jiǎn)單動(dòng)態(tài)字符串simple-dynamic-string

struct sdshdr{
    int len; 字符個(gè)數(shù)赏寇,不包括‘/0’
    int free; 沒有使用的字符個(gè)數(shù)
    char buf[]; 字符數(shù)組
}

空間預(yù)分配

空間預(yù)分配用于優(yōu)化SDS的字符串增長(zhǎng)操作吉嫩。

  1. 如果對(duì)sds修改后,len小于1MB嗅定,那么分配與len同樣大小的未使用空間自娩。buf的長(zhǎng)度變?yōu)?code>len+buf+1
  2. 如果修改后,lend大于等于1MB,那么分配1MB的未使用空間渠退。buf的長(zhǎng)度變?yōu)?code>len+1MB+1byte

惰性空間釋放

用于優(yōu)化SDS的字符串縮短操作

  1. 進(jìn)行縮短操作時(shí)忙迁,不減少buf的長(zhǎng)度,將縮短的部分加入free碎乃。
  2. 同時(shí)提供了真正釋放未使用空間的API姊扔,不用擔(dān)心內(nèi)存浪費(fèi)

C字符串與SDS對(duì)比

C字符串 SDS
獲取字符串長(zhǎng)度復(fù)雜度O(n) 復(fù)雜度O(1)
API不安全,可能緩沖區(qū)溢出 API安全
修改字符串長(zhǎng)度N次必然需要執(zhí)行N次內(nèi)存重分配 修改字符串長(zhǎng)度N次最多需要N次內(nèi)存重分配
只能保存文本數(shù)據(jù) 可以保存文本或者二進(jìn)制數(shù)據(jù)
可以使用所有<string.h>庫(kù)中的函數(shù) 可以使用部分

鏈表

鏈表在redis中應(yīng)用廣泛梅誓,當(dāng)一個(gè)列表鍵包含了數(shù)量較多的元素恰梢,又或者列表包含的元素都是比較長(zhǎng)的字符串時(shí),redis就會(huì)用鏈表作為列表鍵的底層實(shí)現(xiàn)梗掰。

特性

  1. 雙向嵌言, 無環(huán)
  2. 有表頭,表尾指針
  3. 帶鏈表長(zhǎng)度計(jì)數(shù)器
  4. 多態(tài)及穗,可以保存不同類型的值

字典

應(yīng)用廣泛摧茴。整個(gè)數(shù)據(jù)庫(kù)就是一個(gè)kv數(shù)據(jù)庫(kù),其次哈希鍵這個(gè)數(shù)據(jù)結(jié)構(gòu)的底層也是字典埂陆。

哈希表結(jié)構(gòu)

typedef struct dictht {
    // 哈希表數(shù)組
    dictEntry **table;

    // 哈希表大小
    unsigned long size;

    // 哈希表大小掩碼苛白,用于計(jì)算索引值,總是等于size-1
    unsigned long sizemask;

    // 該哈希表已有節(jié)點(diǎn)數(shù)量
    unsigned long used;
} dictht;

哈希表節(jié)點(diǎn)結(jié)構(gòu)

typedef struct dictEntry {
    void *key;

    union(
        void *val;
        uint64_tu64;
        int64_ts64;
    ) v;

    struvt dictEntry *next;
} dictEntry;

字典結(jié)構(gòu)

typedef struct dict {
    // 類型特定函數(shù)
    dictType *type;

    // 私有數(shù)據(jù)
    void *privdata;

    // 哈希表
    dictht ht[2];

    // rehash索引焚虱, 當(dāng)rehash不在進(jìn)行時(shí)丸氛,值為-1
    int trehashidx;
} dict;

字典保存在ht[0]中,ht[1]用來對(duì)哈希表進(jìn)行rehash著摔。使用MurmueHash算法缓窜。數(shù)組+鏈表的方式解決哈希沖突。

rehash優(yōu)化-漸進(jìn)式rehash

如果字典表過大谍咆,一次完成rehash會(huì)造成數(shù)據(jù)庫(kù)在一段時(shí)間停止服務(wù)禾锤。步驟如下:

  1. 為ht[1]分配空間
  2. 在字典中維持一個(gè)索引計(jì)數(shù)器變量rehashidx,并將值置為0
  3. 在rehash期間摹察,每次對(duì)字典進(jìn)行添加刪除恩掷,查找或者更新操作時(shí),順帶將ht[0]哈希表在rehashidx索引上的所有鍵值對(duì)rehash到ht[1]供嚎,完成后rehashidx+1
  4. 最終全部rehash到ht[1]黄娘, 將rehashidx設(shè)為-1表示完成峭状。把ht[0]的哈希表指向ht[1]的哈希表,ht[1]指向null逼争。

壓縮列表

壓縮列表是列表和哈希的底層實(shí)現(xiàn)之一优床,當(dāng)一個(gè)列表鍵只包含少量列表項(xiàng),并且是小整數(shù)值或短字符串誓焦。同時(shí)滿足以下兩點(diǎn)胆敞,使用壓縮鏈表。

  1. 列表對(duì)象保存的所有字符串長(zhǎng)度都小于64字節(jié)
  2. 列表對(duì)象保存的元素?cái)?shù)量小于512個(gè)

跳躍表

redis使用跳躍表作為有序集合的底層實(shí)現(xiàn)之一杂伟,同時(shí)也用在集群節(jié)點(diǎn)中用作內(nèi)部數(shù)據(jù)結(jié)構(gòu)移层。可以參考網(wǎng)上跳表數(shù)據(jù)結(jié)構(gòu)分析赫粥。(個(gè)人感覺與二分的思想是一致的观话,有序情況下降低復(fù)雜度)

set

集合數(shù)據(jù)結(jié)構(gòu)靠字典實(shí)現(xiàn),集合的值為字典的鍵越平,對(duì)應(yīng)的值為null匪燕。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市喧笔,隨后出現(xiàn)的幾起案子帽驯,更是在濱河造成了極大的恐慌,老刑警劉巖书闸,帶你破解...
    沈念sama閱讀 206,214評(píng)論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件尼变,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡浆劲,警方通過查閱死者的電腦和手機(jī)嫌术,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,307評(píng)論 2 382
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來牌借,“玉大人度气,你說我怎么就攤上這事∨虮ǎ” “怎么了磷籍?”我有些...
    開封第一講書人閱讀 152,543評(píng)論 0 341
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)现柠。 經(jīng)常有香客問我院领,道長(zhǎng),這世上最難降的妖魔是什么够吩? 我笑而不...
    開封第一講書人閱讀 55,221評(píng)論 1 279
  • 正文 為了忘掉前任比然,我火速辦了婚禮,結(jié)果婚禮上周循,老公的妹妹穿的比我還像新娘强法。我一直安慰自己万俗,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,224評(píng)論 5 371
  • 文/花漫 我一把揭開白布饮怯。 她就那樣靜靜地躺著闰歪,像睡著了一般。 火紅的嫁衣襯著肌膚如雪硕淑。 梳的紋絲不亂的頭發(fā)上课竣,一...
    開封第一講書人閱讀 49,007評(píng)論 1 284
  • 那天嘉赎,我揣著相機(jī)與錄音置媳,去河邊找鬼。 笑死公条,一個(gè)胖子當(dāng)著我的面吹牛拇囊,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播靶橱,決...
    沈念sama閱讀 38,313評(píng)論 3 399
  • 文/蒼蘭香墨 我猛地睜開眼寥袭,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來了关霸?” 一聲冷哼從身側(cè)響起传黄,我...
    開封第一講書人閱讀 36,956評(píng)論 0 259
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎队寇,沒想到半個(gè)月后膘掰,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,441評(píng)論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡佳遣,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 35,925評(píng)論 2 323
  • 正文 我和宋清朗相戀三年识埋,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片零渐。...
    茶點(diǎn)故事閱讀 38,018評(píng)論 1 333
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡窒舟,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出诵盼,到底是詐尸還是另有隱情惠豺,我是刑警寧澤,帶...
    沈念sama閱讀 33,685評(píng)論 4 322
  • 正文 年R本政府宣布风宁,位于F島的核電站耕腾,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏杀糯。R本人自食惡果不足惜扫俺,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,234評(píng)論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望固翰。 院中可真熱鬧狼纬,春花似錦羹呵、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,240評(píng)論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至盈简,卻和暖如春凑耻,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背柠贤。 一陣腳步聲響...
    開封第一講書人閱讀 31,464評(píng)論 1 261
  • 我被黑心中介騙來泰國(guó)打工香浩, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人臼勉。 一個(gè)月前我還...
    沈念sama閱讀 45,467評(píng)論 2 352
  • 正文 我出身青樓邻吭,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親宴霸。 傳聞我的和親對(duì)象是個(gè)殘疾皇子囱晴,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,762評(píng)論 2 345

推薦閱讀更多精彩內(nèi)容