簡(jiǎn)介
本文簡(jiǎn)要介紹Redis持久化與數(shù)據(jù)庫持久化的區(qū)別舅逸,主要參考Redis作者的blog(見下文參考文獻(xiàn))卷哩;在數(shù)據(jù)庫部分中吸祟,本文詳細(xì)調(diào)研了MySQL的實(shí)現(xiàn)方式進(jìn)行補(bǔ)充。
數(shù)據(jù)庫寫操作
原文中介紹數(shù)據(jù)庫在進(jìn)行寫操作時(shí)到底做了哪些事漫谷,主要有下面五個(gè)過程仔雷。
- 客戶端向服務(wù)端發(fā)送寫操作(數(shù)據(jù)在客戶端的內(nèi)存中)
- 數(shù)據(jù)庫服務(wù)端接收到寫請(qǐng)求的數(shù)據(jù)(數(shù)據(jù)在服務(wù)端的內(nèi)存中)
- 服務(wù)端調(diào)用write(2) 這個(gè)系統(tǒng)調(diào)用,將數(shù)據(jù)往磁盤上寫(數(shù)據(jù)在系統(tǒng)內(nèi)存的緩沖區(qū)中)
- 操作系統(tǒng)將緩沖區(qū)中的數(shù)據(jù)轉(zhuǎn)移到磁盤控制器上(數(shù)據(jù)在磁盤緩存中)
- 磁盤控制器將數(shù)據(jù)寫到磁盤的物理介質(zhì)中(數(shù)據(jù)真正落到磁盤上)
依據(jù)MySQL官網(wǎng)介紹舔示,InnoDB的寫文件過程正是上述過程碟婆,又稱 Doublewrite Buffer;這樣做的好處是:
在崩潰或斷電后增加了恢復(fù)的安全性惕稻,并通過減少對(duì)fsync()操作的需求竖共,提高了Unix大多數(shù)品種的性能。
Redis中RDB持久化
Redis支持將當(dāng)前數(shù)據(jù)的快照存成一個(gè)數(shù)據(jù)文件的持久化機(jī)制俺祠。Redis借助了fork命令的copy on write機(jī)制公给。在生成快照時(shí),將當(dāng)前進(jìn)程fork出一個(gè)子進(jìn)程蜘渣,然后在子進(jìn)程中循環(huán)所有的數(shù)據(jù)妓布,將數(shù)據(jù)寫成為RDB文件。
我們可以通過Redis的save指令來配置RDB快照生成的時(shí)機(jī)宋梧,比如你可以配置當(dāng)10分鐘以內(nèi)有100次寫入就生成快照,也可以配置當(dāng)1小時(shí)內(nèi)有1000次寫入就生成快照狰挡,也可以多個(gè)規(guī)則一起實(shí)施捂龄。這些規(guī)則的定義就在Redis的配置文件中释涛,你也可以通過Redis的CONFIG SET命令在Redis運(yùn)行時(shí)設(shè)置規(guī)則,不需要重啟Redis倦沧。
RDB的不足唇撬,就是一旦數(shù)據(jù)庫出現(xiàn)問題,RDB文件中保存的數(shù)據(jù)并不是全新的展融,從上次RDB文件生成到Redis停機(jī)這段時(shí)間的數(shù)據(jù)全部丟掉了窖认。
Redis中AOF持久化
AOF日志的全稱是Append Only File,它是一個(gè)追加寫入的日志文件告希。與一般數(shù)據(jù)庫的binlog不同的是扑浸,AOF文件是可識(shí)別的純文本,它的內(nèi)容就是一個(gè)個(gè)的Redis標(biāo)準(zhǔn)命令燕偶。
AOF重寫
隨著Redis執(zhí)行命令的增加喝噪,AOF文件會(huì)越來越大,故Redis又提供了一個(gè)功能:AOF rewrite指么。其功能就是重新生成一份AOF文件酝惧,新的AOF文件中一條記錄的操作只會(huì)有一次拣宏,而不像一份老文件那樣物舒,可能記錄了對(duì)同一個(gè)值的多次操作。其生成過程和RDB類似杨何,也是fork一個(gè)進(jìn)程盗似,直接遍歷數(shù)據(jù)哩陕,寫入新的AOF臨時(shí)文件。在寫入新文件的過程中桥言,所有的寫操作日志還是會(huì)寫到原來老的AOF文件中萌踱,同時(shí)還會(huì)記錄在內(nèi)存緩沖區(qū)中。當(dāng)重完操作完成后号阿,會(huì)將所有緩沖區(qū)中的日志一次性寫入到臨時(shí)文件中并鸵。然后調(diào)用原子性的rename命令用新的AOF文件取代老的AOF文件。
數(shù)據(jù)導(dǎo)入
Redis是一個(gè)內(nèi)存數(shù)據(jù)庫扔涧,無論是RDB還是AOF园担,都只是其保證數(shù)據(jù)恢復(fù)的措施;故Redis在利用RDB和AOF進(jìn)行恢復(fù)的時(shí)候枯夜,都會(huì)讀取RDB或AOF文件弯汰,重新加載到內(nèi)存中。相對(duì)于MySQL等數(shù)據(jù)庫的啟動(dòng)時(shí)間來說湖雹,會(huì)長(zhǎng)很多咏闪,因?yàn)镸ySQL本來是不需要將數(shù)據(jù)加載到內(nèi)存中的。
在利用RDB和利用AOF啟動(dòng)上摔吏,其啟動(dòng)時(shí)間有一些差別鸽嫂。RDB的啟動(dòng)時(shí)間會(huì)更短纵装,原因有兩個(gè),一是RDB文件中每一條數(shù)據(jù)只有一條記錄据某,不會(huì)像AOF日志那樣可能有一條數(shù)據(jù)的多次操作記錄橡娄。所以每條數(shù)據(jù)只需要寫一次就行了。另一個(gè)原因是RDB文件的存儲(chǔ)格式和Redis數(shù)據(jù)在內(nèi)存中的編碼格式是一致的癣籽,不需要再進(jìn)行數(shù)據(jù)編碼工作挽唉。在CPU消耗上要遠(yuǎn)小于AOF日志的加載。