redis 源碼見聞錄

redis定義

redis是一個(gè)KV(鍵值)類型的數(shù)據(jù)庫。redis的值可以有多種類型(string,array,list),鍵總是字符串對(duì)象惨好。

字符串對(duì)象

一個(gè)字符串對(duì)象里如果包含了字符串值啃勉,那么這個(gè)字符串的類型稱為sds類型。(對(duì)象里可能還會(huì)有l(wèi)ong類型的值双妨,那個(gè)就不是sds類型)淮阐。

SDS類型

SDS(Simple Dynamic String)簡單動(dòng)態(tài)字符串,是C語言char*的替代品。能高效地支持長度計(jì)算和追加(append)這兩種操作刁品。

SDS類型高效的原因

從數(shù)據(jù)結(jié)構(gòu)來進(jìn)行分析

struct sdshdr {

    // buf 已占用長度
    int len;

    // buf 剩余可用長度
    int free;

    // 實(shí)際保存字符串?dāng)?shù)據(jù)的地方
    char buf[];
};

首先我們發(fā)現(xiàn)里結(jié)構(gòu)體里面有存儲(chǔ)長度字段泣特,那么它取長度的時(shí)間復(fù)雜度就是O(1),而C原生的長度查詢依賴strlen(),復(fù)雜度是O(N)挑随。又因?yàn)椴灰蕾嘋的函状您,直接取長度,所以說它是二進(jìn)制安全的兜挨。

二進(jìn)制安全(不對(duì)數(shù)據(jù)做解析膏孟,將數(shù)據(jù)當(dāng)作二進(jìn)制數(shù)據(jù)流處理。如C的char*拌汇,會(huì)將\0解析成結(jié)尾柒桑。而二進(jìn)制安全則不進(jìn)行任何轉(zhuǎn)義)。)

其次我們發(fā)現(xiàn)噪舀,C原生對(duì)字符串進(jìn)行 N 次追加魁淳,必定需要對(duì)字符串進(jìn)行 N 次內(nèi)存重分配(realloc)。而SDS結(jié)構(gòu)里帶有free和buf与倡,會(huì)在APPEND的時(shí)候給buf一些額外的空間界逛,并將可用內(nèi)存空間記錄在free里。這樣下次APPEND的時(shí)候纺座,就可以直接進(jìn)行追加息拜,不涉及內(nèi)存重新分配。

關(guān)于buf的空間分配規(guī)則:在目前版本的 Redis 中比驻, SDS_MAX_PREALLOC 的值為 1024 * 1024 该溯, 也就是說, 當(dāng)大小小于 1MB 的字符串執(zhí)行追加操作時(shí)别惦, sdsMakeRoomFor 就為它們分配多于所需大小一倍的空間狈茉; 當(dāng)字符串的大小大于 1MB , 那么 sdsMakeRoomFor 就為它們額外多分配 1MB 的空間掸掸。

優(yōu)化:將SDS_MAX_PREALLOC的值調(diào)低氯庆。

優(yōu)點(diǎn):節(jié)省內(nèi)存蹭秋,比如調(diào)整到一半512kb,那么每多一個(gè)APPEND超過512kb的操作,就會(huì)節(jié)省超出512kb部分的內(nèi)存空間出來堤撵。
缺點(diǎn):可能的性能損耗(如果再次APPEND超過512kb的時(shí)候仁讨,會(huì)不走buf,進(jìn)行內(nèi)存重分配)
所以還是要結(jié)合業(yè)務(wù)实昨,根據(jù)APPEND的頻率和大小來選出最適合的buf空間洞豁。

buf的內(nèi)存回收規(guī)則:可以修改配置,定時(shí)釋放(或者重啟redis會(huì)自動(dòng)釋放)

思考:

所有處理 sdshdr 的函數(shù)荒给,都必須正確地更新 len 和 free 屬性丈挟,否則就會(huì)造成 bug。(這里就會(huì)導(dǎo)致redis暫時(shí)只能單線程執(zhí)行志电,如果多線程的話曙咽,要考慮len和free在并發(fā)操作下的一致性)。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末挑辆,一起剝皮案震驚了整個(gè)濱河市例朱,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌鱼蝉,老刑警劉巖洒嗤,帶你破解...
    沈念sama閱讀 217,084評(píng)論 6 503
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異蚀乔,居然都是意外死亡烁竭,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,623評(píng)論 3 392
  • 文/潘曉璐 我一進(jìn)店門吉挣,熙熙樓的掌柜王于貴愁眉苦臉地迎上來派撕,“玉大人,你說我怎么就攤上這事睬魂≈蘸穑” “怎么了?”我有些...
    開封第一講書人閱讀 163,450評(píng)論 0 353
  • 文/不壞的土叔 我叫張陵氯哮,是天一觀的道長际跪。 經(jīng)常有香客問我,道長喉钢,這世上最難降的妖魔是什么姆打? 我笑而不...
    開封第一講書人閱讀 58,322評(píng)論 1 293
  • 正文 為了忘掉前任,我火速辦了婚禮肠虽,結(jié)果婚禮上幔戏,老公的妹妹穿的比我還像新娘。我一直安慰自己税课,他們只是感情好闲延,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,370評(píng)論 6 390
  • 文/花漫 我一把揭開白布痊剖。 她就那樣靜靜地躺著,像睡著了一般垒玲。 火紅的嫁衣襯著肌膚如雪陆馁。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,274評(píng)論 1 300
  • 那天合愈,我揣著相機(jī)與錄音叮贩,去河邊找鬼。 笑死佛析,一個(gè)胖子當(dāng)著我的面吹牛妇汗,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播说莫,決...
    沈念sama閱讀 40,126評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼寞焙!你這毒婦竟也來了储狭?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 38,980評(píng)論 0 275
  • 序言:老撾萬榮一對(duì)情侶失蹤捣郊,失蹤者是張志新(化名)和其女友劉穎辽狈,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體呛牲,經(jīng)...
    沈念sama閱讀 45,414評(píng)論 1 313
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡刮萌,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,599評(píng)論 3 334
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了娘扩。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片着茸。...
    茶點(diǎn)故事閱讀 39,773評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖琐旁,靈堂內(nèi)的尸體忽然破棺而出涮阔,到底是詐尸還是另有隱情,我是刑警寧澤灰殴,帶...
    沈念sama閱讀 35,470評(píng)論 5 344
  • 正文 年R本政府宣布敬特,位于F島的核電站,受9級(jí)特大地震影響牺陶,放射性物質(zhì)發(fā)生泄漏伟阔。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,080評(píng)論 3 327
  • 文/蒙蒙 一掰伸、第九天 我趴在偏房一處隱蔽的房頂上張望皱炉。 院中可真熱鬧,春花似錦碱工、人聲如沸娃承。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,713評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽历筝。三九已至酗昼,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間梳猪,已是汗流浹背麻削。 一陣腳步聲響...
    開封第一講書人閱讀 32,852評(píng)論 1 269
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留春弥,地道東北人呛哟。 一個(gè)月前我還...
    沈念sama閱讀 47,865評(píng)論 2 370
  • 正文 我出身青樓,卻偏偏與公主長得像匿沛,于是被迫代替她去往敵國和親扫责。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,689評(píng)論 2 354

推薦閱讀更多精彩內(nèi)容