redis持久化的幾種方式
1聂渊、前言
Redis是一種高級(jí)key-value數(shù)據(jù)庫。它跟memcached類似穷躁,不過數(shù)據(jù)可以持久化耕肩,而且支持的數(shù)據(jù)類型很豐富。有字符串问潭,鏈表猿诸,集 合和有序集合。支持在服務(wù)器端計(jì)算集合的并狡忙,交和補(bǔ)集(difference)等两芳,還支持多種排序功能。所以Redis也可以被看成是一個(gè)數(shù)據(jù)結(jié)構(gòu)服務(wù) 器去枷。
Redis的所有數(shù)據(jù)都是保存在內(nèi)存中,然后不定期的通過異步方式保存到磁盤上(這稱為“半持久化模式”)是复;也可以把每一次數(shù)據(jù)變化都寫入到一個(gè)append only file(aof)里面(這稱為“全持久化模式”)删顶。
由于Redis的數(shù)據(jù)都存放在內(nèi)存中,如果沒有配置持久化淑廊,redis重啟后數(shù)據(jù)就全丟失了逗余,于是需要開啟redis的持久化功能,將數(shù)據(jù)保存到磁 盤上季惩,當(dāng)redis重啟后录粱,可以從磁盤中恢復(fù)數(shù)據(jù)。redis提供兩種方式進(jìn)行持久化画拾,一種是RDB持久化(原理是將Reids在內(nèi)存中的數(shù)據(jù)庫記錄定時(shí) dump到磁盤上的RDB持久化)啥繁,另外一種是AOF(append only file)持久化(原理是將Reids的操作日志以追加的方式寫入文件)。那么這兩種持久化方式有什么區(qū)別呢青抛,改如何選擇呢旗闽?網(wǎng)上看了大多數(shù)都是介紹這兩 種方式怎么配置,怎么使用蜜另,就是沒有介紹二者的區(qū)別适室,在什么應(yīng)用場景下使用。
2举瑰、二者的區(qū)別
RDB持久化是指在指定的時(shí)間間隔內(nèi)將內(nèi)存中的數(shù)據(jù)集快照寫入磁盤捣辆,實(shí)際操作過程是fork一個(gè)子進(jìn)程,先將數(shù)據(jù)集寫入臨時(shí)文件此迅,寫入成功后汽畴,再替換之前的文件旧巾,用二進(jìn)制壓縮存儲(chǔ)。
AOF持久化以日志的形式記錄服務(wù)器所處理的每一個(gè)寫整袁、刪除操作菠齿,查詢操作不會(huì)記錄,以文本的方式記錄坐昙,可以打開文件看到詳細(xì)的操作記錄绳匀。
3、二者優(yōu)缺點(diǎn)
RDB存在哪些優(yōu)勢呢炸客?
1). 一旦采用該方式疾棵,那么你的整個(gè)Redis數(shù)據(jù)庫將只包含一個(gè)文件,這對(duì)于文件備份而言是非常完美的痹仙。比如是尔,你可能打算每個(gè)小時(shí)歸檔一次最近24小時(shí)的數(shù) 據(jù),同時(shí)還要每天歸檔一次最近30天的數(shù)據(jù)开仰。通過這樣的備份策略拟枚,一旦系統(tǒng)出現(xiàn)災(zāi)難性故障,我們可以非常容易的進(jìn)行恢復(fù)众弓。
2). 對(duì)于災(zāi)難恢復(fù)而言恩溅,RDB是非常不錯(cuò)的選擇。因?yàn)槲覀兛梢苑浅]p松的將一個(gè)單獨(dú)的文件壓縮后再轉(zhuǎn)移到其它存儲(chǔ)介質(zhì)上谓娃。
3). 性能最大化脚乡。對(duì)于Redis的服務(wù)進(jìn)程而言,在開始持久化時(shí)滨达,它唯一需要做的只是fork出子進(jìn)程奶稠,之后再由子進(jìn)程完成這些持久化的工作,這樣就可以極大的避免服務(wù)進(jìn)程執(zhí)行IO操作了捡遍。
4). 相比于AOF機(jī)制锌订,如果數(shù)據(jù)集很大,RDB的啟動(dòng)效率會(huì)更高稽莉。
RDB又存在哪些劣勢呢瀑志?
1). 如果你想保證數(shù)據(jù)的高可用性,即最大限度的避免數(shù)據(jù)丟失污秆,那么RDB將不是一個(gè)很好的選擇劈猪。因?yàn)橄到y(tǒng)一旦在定時(shí)持久化之前出現(xiàn)宕機(jī)現(xiàn)象,此前沒有來得及寫入磁盤的數(shù)據(jù)都將丟失良拼。
2). 由于RDB是通過fork子進(jìn)程來協(xié)助完成數(shù)據(jù)持久化工作的战得,因此,如果當(dāng)數(shù)據(jù)集較大時(shí)庸推,可能會(huì)導(dǎo)致整個(gè)服務(wù)器停止服務(wù)幾百毫秒常侦,甚至是1秒鐘浇冰。
AOF的優(yōu)勢有哪些呢?
1). 該機(jī)制可以帶來更高的數(shù)據(jù)安全性聋亡,即數(shù)據(jù)持久性肘习。Redis中提供了3中同步策略,即每秒同步坡倔、每修改同步和不同步漂佩。事實(shí)上,每秒同步也是異步完成的罪塔,其 效率也是非常高的投蝉,所差的是一旦系統(tǒng)出現(xiàn)宕機(jī)現(xiàn)象,那么這一秒鐘之內(nèi)修改的數(shù)據(jù)將會(huì)丟失征堪。而每修改同步瘩缆,我們可以將其視為同步持久化,即每次發(fā)生的數(shù)據(jù)變 化都會(huì)被立即記錄到磁盤中佃蚜∮褂椋可以預(yù)見,這種方式在效率上是最低的谐算。至于無同步涌韩,無需多言,我想大家都能正確的理解它氯夷。
2). 由于該機(jī)制對(duì)日志文件的寫入操作采用的是append模式,因此在寫入過程中即使出現(xiàn)宕機(jī)現(xiàn)象靶擦,也不會(huì)破壞日志文件中已經(jīng)存在的內(nèi)容腮考。然而如果我們本次操 作只是寫入了一半數(shù)據(jù)就出現(xiàn)了系統(tǒng)崩潰問題,不用擔(dān)心玄捕,在Redis下一次啟動(dòng)之前踩蔚,我們可以通過redis-check-aof工具來幫助我們解決數(shù)據(jù) 一致性的問題。
3). 如果日志過大枚粘,Redis可以自動(dòng)啟用rewrite機(jī)制馅闽。即Redis以append模式不斷的將修改數(shù)據(jù)寫入到老的磁盤文件中,同時(shí)Redis還會(huì)創(chuàng) 建一個(gè)新的文件用于記錄此期間有哪些修改命令被執(zhí)行馍迄。因此在進(jìn)行rewrite切換時(shí)可以更好的保證數(shù)據(jù)安全性福也。
4). AOF包含一個(gè)格式清晰、易于理解的日志文件用于記錄所有的修改操作攀圈。事實(shí)上暴凑,我們也可以通過該文件完成數(shù)據(jù)的重建。
AOF的劣勢有哪些呢赘来?
1). 對(duì)于相同數(shù)量的數(shù)據(jù)集而言现喳,AOF文件通常要大于RDB文件凯傲。RDB 在恢復(fù)大數(shù)據(jù)集時(shí)的速度比 AOF 的恢復(fù)速度要快。
2). 根據(jù)同步策略的不同嗦篱,AOF在運(yùn)行效率上往往會(huì)慢于RDB冰单。總之灸促,每秒同步策略的效率是比較高的诫欠,同步禁用策略的效率和RDB一樣高效。
二者選擇的標(biāo)準(zhǔn)腿宰,就是看系統(tǒng)是愿意犧牲一些性能呕诉,換取更高的緩存一致性(aof),還是愿意寫操作頻繁的時(shí)候吃度,不啟用備份來換取更高的性能甩挫,待手動(dòng)運(yùn)行save的時(shí)候,再做備份(rdb)椿每。rdb這個(gè)就更有些 eventually consistent的意思了伊者。
4、常用配置
RDB持久化配置
Redis會(huì)將數(shù)據(jù)集的快照dump到dump.rdb文件中间护。此外亦渗,我們也可以通過配置文件來修改Redis服務(wù)器dump快照的頻率,在打開6379.conf文件之后汁尺,我們搜索save法精,可以看到下面的配置信息:
save 900 1 #在900秒(15分鐘)之后,如果至少有1個(gè)key發(fā)生變化痴突,則dump內(nèi)存快照搂蜓。
save 300 10 #在300秒(5分鐘)之后,如果至少有10個(gè)key發(fā)生變化辽装,則dump內(nèi)存快照帮碰。
save 60 10000 #在60秒(1分鐘)之后,如果至少有10000個(gè)key發(fā)生變化拾积,則dump內(nèi)存快照殉挽。
AOF持久化配置
在Redis的配置文件中存在三種同步方式,它們分別是:
appendfsync always #每次有數(shù)據(jù)修改發(fā)生時(shí)都會(huì)寫入AOF文件拓巧。
appendfsync everysec #每秒鐘同步一次斯碌,該策略為AOF的缺省策略。
appendfsync no #從不同步肛度。高效但是數(shù)據(jù)不會(huì)被持久化输拇。