mysql日志系統(tǒng)之redo log和bin log

首先隧甚,我們先來(lái)看看一次查詢/更新語(yǔ)句流程圖

mysql查詢/更新流程圖.png

本文會(huì)將重點(diǎn)放在執(zhí)行器<->存儲(chǔ)引擎之間的交互。

mysql不是每次數(shù)據(jù)更改都立刻寫到磁盤渡冻,而是會(huì)先將修改后的結(jié)果暫存在內(nèi)存中,當(dāng)一段時(shí)間后戚扳,再一次性將多個(gè)修改寫到磁盤上,減少磁盤io成本族吻,同時(shí)提高操作速度帽借。

  • mysql通過(guò)WAL(write-ahead logging)技術(shù)保證事務(wù)
    在同一個(gè)事務(wù)中,每當(dāng)數(shù)據(jù)庫(kù)進(jìn)行修改數(shù)據(jù)操作時(shí)超歌,將修改結(jié)果更新到內(nèi)存后砍艾,會(huì)在redo log添加一行記錄記錄“需要在哪個(gè)數(shù)據(jù)頁(yè)上做什么修改”,并將該記錄狀態(tài)置為prepare握础,等到commit提交事務(wù)后辐董,會(huì)將此次事務(wù)中在redo log添加的記錄的狀態(tài)都置為commit狀態(tài),之后將修改落盤時(shí)禀综,會(huì)將redo log中狀態(tài)為commit的記錄的修改都寫入磁盤简烘。過(guò)程如下圖
    更新流程.png
  • redo log記錄方式
    redolog的大小是固定的,在mysql中可以通過(guò)修改配置參數(shù)innodb_log_files_in_group和innodb_log_file_size配置日志文件數(shù)量和每個(gè)日志文件大小定枷,redolog采用循環(huán)寫的方式記錄孤澎,當(dāng)寫到結(jié)尾時(shí),會(huì)回到開(kāi)頭循環(huán)寫日志欠窒。如下圖
    redolog記錄方式.png

    write pos表示日志當(dāng)前記錄的位置覆旭,當(dāng)ib_logfile_4寫滿后,會(huì)從ib_logfile_1從頭開(kāi)始記錄岖妄;check point表示將日志記錄的修改寫進(jìn)磁盤型将,完成數(shù)據(jù)落盤,數(shù)據(jù)落盤后checkpoint會(huì)將日志上的相關(guān)記錄擦除掉荐虐,即write pos->checkpoint之間的部分是redo log空著的部分七兜,用于記錄新的記錄,checkpoint->write pos之間是redo log待落盤的數(shù)據(jù)修改記錄福扬。當(dāng)writepos追上checkpoint時(shí)腕铸,得先停下記錄,先推動(dòng)checkpoint向前移動(dòng)铛碑,空出位置記錄新的日志狠裹。
    有了redo log,當(dāng)數(shù)據(jù)庫(kù)發(fā)生宕機(jī)重啟后汽烦,可通過(guò)redo log將未落盤的數(shù)據(jù)恢復(fù)涛菠,即保證已經(jīng)提交的事務(wù)記錄不會(huì)丟失。
    有了redo log撇吞,為啥還需要binlog呢俗冻?

1、redo log的大小是固定的梢夯,日志上的記錄修改落盤后言疗,日志會(huì)被覆蓋掉,無(wú)法用于數(shù)據(jù)回滾/數(shù)據(jù)恢復(fù)等操作颂砸。
2噪奄、redo log是innodb引擎層實(shí)現(xiàn)的,并不是所有引擎都有人乓。

  • 基于以上勤篮,binlog必不可少

1、binlog是server層實(shí)現(xiàn)的色罚,意味著所有引擎都可以使用binlog日志
2碰缔、binlog通過(guò)追加的方式寫入的,可通過(guò)配置參數(shù)max_binlog_size設(shè)置每個(gè)binlog文件的大小戳护,當(dāng)文件大小大于給定值后金抡,日志會(huì)發(fā)生滾動(dòng)瀑焦,之后的日志記錄到新的文件上。
3梗肝、binlog有兩種記錄模式榛瓮,statement格式的話是記sql語(yǔ)句, row格式會(huì)記錄行的內(nèi)容巫击,記兩條禀晓,更新前和更新后都有。

binlog和redo log必須保持一致坝锰,不允許出現(xiàn)binlog有記錄但redolog沒(méi)有的情況粹懒,反之亦然。之前說(shuō)過(guò)在一個(gè)事務(wù)中顷级,redolog有prepare和commit兩種狀態(tài)凫乖,所以,在redolog狀態(tài)為prepare時(shí)記錄binlog可保證兩日志的記錄一致愕把,下圖列出各種情況來(lái)說(shuō)明拣凹。


4.png

現(xiàn)在我們?cè)賮?lái)看看整個(gè)完整的流程圖

更新流程.png

相關(guān)參數(shù)設(shè)置建議:

1、innodb_flush_log_at_trx_commit:設(shè)置為1恨豁,表示每次事務(wù)的redolog都直接持久化到磁盤(注意是這里指的是redolog日志本身落盤)嚣镜,保證mysql重啟后數(shù)據(jù)不丟失。
2橘蜜、sync_binlog: 設(shè)置為1菊匿,表示每次事務(wù)的binlog都直接持久化到磁盤(注意是這里指的是binlog日志本身落盤),保證mysql重啟后binlog記錄是完整的计福。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末跌捆,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子象颖,更是在濱河造成了極大的恐慌佩厚,老刑警劉巖,帶你破解...
    沈念sama閱讀 206,378評(píng)論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件说订,死亡現(xiàn)場(chǎng)離奇詭異抄瓦,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī)陶冷,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,356評(píng)論 2 382
  • 文/潘曉璐 我一進(jìn)店門钙姊,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人埂伦,你說(shuō)我怎么就攤上這事煞额。” “怎么了?”我有些...
    開(kāi)封第一講書(shū)人閱讀 152,702評(píng)論 0 342
  • 文/不壞的土叔 我叫張陵膊毁,是天一觀的道長(zhǎng)胀莹。 經(jīng)常有香客問(wèn)我,道長(zhǎng)媚媒,這世上最難降的妖魔是什么嗜逻? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 55,259評(píng)論 1 279
  • 正文 為了忘掉前任涩僻,我火速辦了婚禮缭召,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘逆日。我一直安慰自己嵌巷,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,263評(píng)論 5 371
  • 文/花漫 我一把揭開(kāi)白布室抽。 她就那樣靜靜地躺著搪哪,像睡著了一般。 火紅的嫁衣襯著肌膚如雪坪圾。 梳的紋絲不亂的頭發(fā)上晓折,一...
    開(kāi)封第一講書(shū)人閱讀 49,036評(píng)論 1 285
  • 那天,我揣著相機(jī)與錄音兽泄,去河邊找鬼漓概。 笑死,一個(gè)胖子當(dāng)著我的面吹牛病梢,可吹牛的內(nèi)容都是我干的胃珍。 我是一名探鬼主播,決...
    沈念sama閱讀 38,349評(píng)論 3 400
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼蜓陌,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼觅彰!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起钮热,我...
    開(kāi)封第一講書(shū)人閱讀 36,979評(píng)論 0 259
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤填抬,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后隧期,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體飒责,經(jīng)...
    沈念sama閱讀 43,469評(píng)論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 35,938評(píng)論 2 323
  • 正文 我和宋清朗相戀三年厌秒,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了读拆。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 38,059評(píng)論 1 333
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡鸵闪,死狀恐怖檐晕,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤辟灰,帶...
    沈念sama閱讀 33,703評(píng)論 4 323
  • 正文 年R本政府宣布个榕,位于F島的核電站,受9級(jí)特大地震影響芥喇,放射性物質(zhì)發(fā)生泄漏西采。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,257評(píng)論 3 307
  • 文/蒙蒙 一继控、第九天 我趴在偏房一處隱蔽的房頂上張望械馆。 院中可真熱鬧,春花似錦武通、人聲如沸霹崎。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 30,262評(píng)論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)尾菇。三九已至,卻和暖如春囚枪,著一層夾襖步出監(jiān)牢的瞬間派诬,已是汗流浹背。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 31,485評(píng)論 1 262
  • 我被黑心中介騙來(lái)泰國(guó)打工链沼, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留默赂,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 45,501評(píng)論 2 354
  • 正文 我出身青樓忆植,卻偏偏與公主長(zhǎng)得像放可,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子朝刊,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,792評(píng)論 2 345

推薦閱讀更多精彩內(nèi)容