redisObject

定義

在自定義的基礎(chǔ)數(shù)據(jù)結(jié)構(gòu)的基礎(chǔ)上萎河,redis 通過 redisObject 封裝整合成了對(duì)外暴露的5中數(shù)據(jù)結(jié)構(gòu)。 首先看看 redisObject 的定義:

#define LRU_BITS 24
typedef struct redisObject {    // redis對(duì)象
    unsigned type:4;    // 類型,4bit
    unsigned encoding:4;    // 編碼,4bit
    unsigned lru:LRU_BITS; /* lru time (relative to server.lruclock) */ // 24bit
    int refcount;   // 引用計(jì)數(shù)
    void *ptr;  // 指向各種基礎(chǔ)類型的指針
} robj;

其中 type 用于標(biāo)識(shí) string兜畸、hash、list、set、zset 五種數(shù)據(jù)類型苗胀、encoding 用于標(biāo)識(shí)底層數(shù)據(jù)結(jié)構(gòu)。通過這兩個(gè)字段的組合瓦堵,同一種數(shù)據(jù)類型也有多種實(shí)現(xiàn)方式,一個(gè)完整的映射關(guān)系如下表:

  • lru 用于保存對(duì)象的LRU時(shí)鐘
  • refcount 為對(duì)象的引用計(jì)數(shù)歌亲,redisObject都是通過簡單的引用計(jì)數(shù)法進(jìn)行垃圾回收
  • ptr 保存了指向各種底層數(shù)據(jù)實(shí)例的指針

對(duì)象創(chuàng)建

obj *createObject(int type, void *ptr) {   // 創(chuàng)建一個(gè)對(duì)象
    robj *o = zmalloc(sizeof(*o));
    o->type = type;
    o->encoding = OBJ_ENCODING_RAW;
    o->ptr = ptr;
    o->refcount = 1;

    /* Set the LRU to the current lruclock (minutes resolution). */
    o->lru = LRU_CLOCK();   // LRU時(shí)鐘
    return o;
}

基礎(chǔ)的創(chuàng)建對(duì)象函數(shù)很簡單菇用,申請(qǐng)一個(gè)object的空間,記錄type和具體數(shù)據(jù)的指針陷揪,并將引用計(jì)數(shù)置1惋鸥。針對(duì)不同的數(shù)據(jù)類型 redis 又封裝了不同的函數(shù)

對(duì)象銷毀

redis 采用了簡單的引用計(jì)數(shù),通過redisObject結(jié)構(gòu)體中的refcount對(duì)對(duì)象的引用進(jìn)行計(jì)數(shù)悍缠,當(dāng)引用計(jì)數(shù)為0時(shí)就將對(duì)象銷毀卦绣。

  • 當(dāng)創(chuàng)建一個(gè)對(duì)象時(shí),引用計(jì)數(shù)會(huì)被初始化為1
  • 當(dāng)對(duì)象被重復(fù)使用時(shí)飞蚓,會(huì)對(duì)引用計(jì)數(shù)進(jìn)行加一
  • 當(dāng)對(duì)象不再被使用時(shí)滤港,會(huì)對(duì)引用計(jì)數(shù)進(jìn)行減一
  • 引用計(jì)數(shù)為0時(shí),對(duì)象所占的內(nèi)存你會(huì)被釋放
void decrRefCount(robj *o) {    // 引用計(jì)數(shù)減一
    if (o->refcount <= 0) serverPanic("decrRefCount against refcount <= 0");
    if (o->refcount == 1) { // 當(dāng)引用計(jì)數(shù)為1的時(shí)候直接釋放
        switch(o->type) {
        case OBJ_STRING: freeStringObject(o); break;
        case OBJ_LIST: freeListObject(o); break;
        case OBJ_SET: freeSetObject(o); break;
        case OBJ_ZSET: freeZsetObject(o); break;
        case OBJ_HASH: freeHashObject(o); break;
        default: serverPanic("Unknown object type"); break;
        }
        zfree(o);
    } else {
        o->refcount--;
    }
}

redis 的引用計(jì)數(shù)十分簡單趴拧,沒有PHP等語言引用計(jì)數(shù)的復(fù)雜染色機(jī)制溅漾。主要是因?yàn)樗袑?duì)象都是由 redis 自己創(chuàng)建和維護(hù)的山叮,不會(huì)出現(xiàn)復(fù)雜的循環(huán)引用場景。

共享對(duì)象

在 redis 中有一種特殊的對(duì)象添履,在server初始化的時(shí)候創(chuàng)建很多常用的數(shù)據(jù)屁倔,用于全局共享。這部分?jǐn)?shù)據(jù)不會(huì)被銷毀暮胧,主要用于server的各種運(yùn)行標(biāo)識(shí)和用戶數(shù)據(jù)存儲(chǔ)锐借。從而起到節(jié)省內(nèi)存目的,比滿大街的破銅爛鐵不知道高到哪里去往衷。
例如在string對(duì)象中瞎饲,在創(chuàng)建一個(gè)數(shù)字時(shí),會(huì)判斷是否在shared.integers的范圍中炼绘,如果命中就不進(jìn)行對(duì)象創(chuàng)建嗅战,直接使用對(duì)應(yīng)的共享對(duì)象,并將引用計(jì)數(shù)加一

if ((server.maxmemory == 0 ||
        !(server.maxmemory_policy & MAXMEMORY_FLAG_NO_SHARED_INTEGERS)) &&
        value >= 0 &&
        value < OBJ_SHARED_INTEGERS)
    {   // 使用shared數(shù)據(jù)俺亮,節(jié)省內(nèi)存
        decrRefCount(o);  // 銷毀之前創(chuàng)建的字符串對(duì)象
        incrRefCount(shared.integers[value]);  // 共享對(duì)象引用計(jì)數(shù)加一
        return shared.integers[value];  // 返回共享對(duì)象
    }

shared.integers的默認(rèn)范圍為0-9999

#define OBJ_SHARED_INTEGERS 10000
for (j = 0; j < OBJ_SHARED_INTEGERS; j++) {
    shared.integers[j] =
        makeObjectShared(createObject(OBJ_STRING,(void*)(long)j));
    shared.integers[j]->encoding = OBJ_ENCODING_INT;
}

除了用于共享存儲(chǔ)數(shù)據(jù)的shared.integers驮捍,還有很多用于redisServer運(yùn)行的字符串常量

shared.crlf = createObject(OBJ_STRING,sdsnew("\r\n"));
shared.ok = createObject(OBJ_STRING,sdsnew("+OK\r\n"));
shared.err = createObject(OBJ_STRING,sdsnew("-ERR\r\n"));

可以自行查看server.c中的createSharedObjects函數(shù)。

LRU

redisObject中的lru屬性專門用來記錄對(duì)象的被訪問情況脚曾,lru保存了最近一次對(duì)象被正常訪問的時(shí)間:

#define LRU_BITS 24
typedef struct redisObject {    // redis對(duì)象
    // ...
    unsigned lru:LRU_BITS; /* lru time (relative to server.lruclock) */
    // ...
} robj;

如果 redis 設(shè)定了maxmemory數(shù)值东且,且maxmemory-policy設(shè)置為allkeys-lru或volatile-lru時(shí),redis 會(huì)根據(jù)對(duì)象中的lru屬性對(duì)DB中的數(shù)據(jù)進(jìn)行淘汰本讥。

在每次正常訪問數(shù)據(jù)時(shí)珊泳,都會(huì)更新對(duì)應(yīng)數(shù)據(jù)的lru時(shí)鐘

robj *lookupKey(redisDb *db, robj *key, int flags) {    // 從DB中查找對(duì)應(yīng)key
    dictEntry *de = dictFind(db->dict,key->ptr);
    if (de) {   // 如果存在
        robj *val = dictGetVal(de);

        if (server.rdb_child_pid == -1 &&
            server.aof_child_pid == -1 &&
            !(flags & LOOKUP_NOTOUCH))
        {   // 當(dāng)有rdb和aof子進(jìn)程在運(yùn)行時(shí),不進(jìn)行l(wèi)ru更新
            val->lru = LRU_CLOCK(); // 更新lru時(shí)間
        }
        return val;
    } else {
        return NULL;
    }
}

object命令比較特殊拷沸,這個(gè)命令可以查看key對(duì)應(yīng)的對(duì)象的狀態(tài):引用計(jì)數(shù)色查、編碼和lru時(shí)鐘和系統(tǒng)時(shí)鐘的時(shí)差。這個(gè)命令在訪問數(shù)據(jù)的時(shí)候并不會(huì)更新lru時(shí)鐘撞芍,因?yàn)槠渲苯訉?duì)DB進(jìn)行查找操作秧了,并沒有通過db.c封裝的函數(shù)進(jìn)行訪問。

void objectCommand(client *c) { // object操作對(duì)應(yīng)的函數(shù)
    robj *o;

    if (!strcasecmp(c->argv[1]->ptr,"refcount") && c->argc == 3) {  // 獲取對(duì)象的引用計(jì)數(shù)
        if ((o = objectCommandLookupOrReply(c,c->argv[2],shared.nullbulk))
                == NULL) return;
        addReplyLongLong(c,o->refcount);
    } else if (!strcasecmp(c->argv[1]->ptr,"encoding") && c->argc == 3) {   // 獲取對(duì)象的編碼
        if ((o = objectCommandLookupOrReply(c,c->argv[2],shared.nullbulk))
                == NULL) return;
        addReplyBulkCString(c,strEncoding(o->encoding));
    } else if (!strcasecmp(c->argv[1]->ptr,"idletime") && c->argc == 3) {   // 獲取對(duì)象lru和系統(tǒng)lru時(shí)間的差值
        if ((o = objectCommandLookupOrReply(c,c->argv[2],shared.nullbulk))
                == NULL) return;
        addReplyLongLong(c,estimateObjectIdleTime(o)/1000);
    } else {
        addReplyError(c,"Syntax error. Try OBJECT (refcount|encoding|idletime)");
    }
}

robj *objectCommandLookup(client *c, robj *key) {   // 從DB中查找對(duì)應(yīng)數(shù)據(jù)對(duì)象
    dictEntry *de;
    if ((de = dictFind(c->db->dict,key->ptr)) == NULL) return NULL; // 直接查找db
    return (robj*) dictGetVal(de);
}

robj *objectCommandLookupOrReply(client *c, robj *key, robj *reply) {   // 獲取object序无,如果不存在reply
    robj *o = objectCommandLookup(c,key);
    if (!o) addReply(c, reply);
    return o;
}

原文

http://czrzchao.com/redisSourceObject

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末验毡,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子帝嗡,更是在濱河造成了極大的恐慌晶通,老刑警劉巖,帶你破解...
    沈念sama閱讀 207,113評(píng)論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件哟玷,死亡現(xiàn)場離奇詭異狮辽,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,644評(píng)論 2 381
  • 文/潘曉璐 我一進(jìn)店門隘竭,熙熙樓的掌柜王于貴愁眉苦臉地迎上來塘秦,“玉大人,你說我怎么就攤上這事动看∽鹛蓿” “怎么了?”我有些...
    開封第一講書人閱讀 153,340評(píng)論 0 344
  • 文/不壞的土叔 我叫張陵菱皆,是天一觀的道長须误。 經(jīng)常有香客問我,道長仇轻,這世上最難降的妖魔是什么京痢? 我笑而不...
    開封第一講書人閱讀 55,449評(píng)論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮篷店,結(jié)果婚禮上祭椰,老公的妹妹穿的比我還像新娘。我一直安慰自己疲陕,他們只是感情好方淤,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,445評(píng)論 5 374
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著蹄殃,像睡著了一般携茂。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上诅岩,一...
    開封第一講書人閱讀 49,166評(píng)論 1 284
  • 那天讳苦,我揣著相機(jī)與錄音,去河邊找鬼吩谦。 笑死鸳谜,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的逮京。 我是一名探鬼主播卿堂,決...
    沈念sama閱讀 38,442評(píng)論 3 401
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼懒棉!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起览绿,我...
    開封第一講書人閱讀 37,105評(píng)論 0 261
  • 序言:老撾萬榮一對(duì)情侶失蹤策严,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后饿敲,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體妻导,經(jīng)...
    沈念sama閱讀 43,601評(píng)論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,066評(píng)論 2 325
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了倔韭。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片术浪。...
    茶點(diǎn)故事閱讀 38,161評(píng)論 1 334
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖寿酌,靈堂內(nèi)的尸體忽然破棺而出胰苏,到底是詐尸還是另有隱情,我是刑警寧澤醇疼,帶...
    沈念sama閱讀 33,792評(píng)論 4 323
  • 正文 年R本政府宣布硕并,位于F島的核電站,受9級(jí)特大地震影響秧荆,放射性物質(zhì)發(fā)生泄漏倔毙。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,351評(píng)論 3 307
  • 文/蒙蒙 一乙濒、第九天 我趴在偏房一處隱蔽的房頂上張望陕赃。 院中可真熱鬧,春花似錦颁股、人聲如沸么库。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,352評(píng)論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽廊散。三九已至,卻和暖如春梧疲,著一層夾襖步出監(jiān)牢的瞬間允睹,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 31,584評(píng)論 1 261
  • 我被黑心中介騙來泰國打工幌氮, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留缭受,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 45,618評(píng)論 2 355
  • 正文 我出身青樓该互,卻偏偏與公主長得像米者,于是被迫代替她去往敵國和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子宇智,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,916評(píng)論 2 344

推薦閱讀更多精彩內(nèi)容

  • 轉(zhuǎn)載:可能是目前最詳細(xì)的Redis內(nèi)存模型及應(yīng)用解讀 Redis是目前最火爆的內(nèi)存數(shù)據(jù)庫之一蔓搞,通過在內(nèi)存中讀寫數(shù)據(jù)...
    jwnba24閱讀 620評(píng)論 0 4
  • 前言 Redis是目前最火爆的內(nèi)存數(shù)據(jù)庫之一,通過在內(nèi)存中讀寫數(shù)據(jù)随橘,大大提高了讀寫速度喂分,可以說Redis是實(shí)現(xiàn)網(wǎng)站...
    小陳阿飛閱讀 803評(píng)論 0 1
  • 幾個(gè)常用了命令行 登錄 redis-cli -h 127.0.0.1 -p 6379 -a 123 查看內(nèi)存 in...
    lucode閱讀 991評(píng)論 0 2
  • 今天我起了一個(gè)早,看到?jīng)]有一個(gè)來自你的消息机蔗,有些時(shí)候?qū)ξ襾碚f不知道是該開心還是不開心蒲祈,我能假想我不在你旁邊看著你甘萧,...
    12點(diǎn)鐘閱讀 159評(píng)論 1 2