[mysql] Binlog的配置和使用

created by Dejavu


mysql版本: mysql 5.7.26
操作系統(tǒng): ubuntu 18.04

參考文章

cd /var/log/mysql
sudo mysqlbinlog --base64-output=decode-rows -v /var/log/mysql/mysql-bin.000001

binlog簡介

? binlog是一個二進制格式的文件九榔,用于記錄用戶對數據庫增量操作的SQL語句信息苫幢,例如更改數據庫表和更改內容的SQL語句都會記錄到binlog里,但是對庫表等內容的查詢不會記錄

? 默認情況下扒吁,binlog日志是二進制格式的,不能使用查看文本工具的命令(比如,cat,vi等)查看险掀,而使用mysqlbinlog解析查看

binlog是 記錄數據庫增刪改,不記錄查詢的二進制日志.
用于數據恢復,主從復制及數據的增量恢復

binlog的配置

配置文件的各個option作用

server-id               = 1
log_bin                 = /var/log/mysql/mysql-bin.log
expire_logs_days        = 10
binlog_format           = "MIXED"
max_binlog_size         = 100M
binlog_do_db            = include_database_name
binlog_ignore_db        = include_database_name

server_id

mysql> mysqlvariables like '%server_id%';
+----------------+-------+
| Variable_name  | Value |
+----------------+-------+
| server_id      | 1     |
| server_id_bits | 32    |
+----------------+-------+

server_id 自然數湾宙,標識數據庫id

log_bin

日志路徑樟氢,填入后重啟數據庫,binlog啟動并開始記錄

expire_logs_days

日志過期時間侠鳄,設置為0則永不過期

-- 修改過期時間
mysql> set global expire_logs_days=7;
-- 設置之后不會立即清除埠啃,觸發(fā)條件是:
-- binlog大小超過max_binlog_size
-- 或者執(zhí)行 flush logs
mysql> flush logs;
-- 清除000055和以前的binlog
mysql>purge binary logs to 'bin.000055';

binlog_format

STATEMENT模式(SBR)

每一條會修改數據的sql語句會記錄到binlog中。優(yōu)點是并不需要記錄每一條sql語句和每一行的數據變化畦攘,減少了binlog日志量,節(jié)約IO十电,提高性能知押。缺點是在某些情況下會導致master-slave中的數據不一致(如sleep()函數叹螟, last_insert_id(),以及user-defined functions(udf)等會出現問題)

② ROW模式(RBR)

不記錄每條sql語句的上下文信息台盯,僅需記錄哪條數據被修改了罢绽,修改成什么樣了。而且不會出現某些特定情況下的存儲過程静盅、或function良价、或trigger的調用和觸發(fā)無法被正確復制的問題。缺點是會產生大量的日志蒿叠,尤其是alter table的時候會讓日志暴漲明垢。

③ MIXED模式(MBR)

以上兩種模式的混合使用,一般的復制使用STATEMENT模式保存binlog市咽,對于STATEMENT模式無法復制的操作使用ROW模式保存binlog痊银,MySQL會根據執(zhí)行的SQL語句選擇日志保存方式。

以下是操作實例

  • statement

    執(zhí)行插入操作

    insert into role (name, value) values ('name1', 1), ('name2', 2);
    

    命令行查看結果

    sudo mysqlbinlog --base64-output=decode-rows -v /var/log/mysql/mysql-bin.000001
    
    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;
    /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;
    ......
    SET TIMESTAMP=1560862594/*!*/;
    insert into role (name, value) values ('name1', 1), ('name2', 2)
    ......
    # End of log file
    /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;
    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;
    

    更新操作

    update role set value=3;
    

    命令行查看結果

    sudo mysqlbinlog --base64-output=decode-rows -v /var/log/mysql/mysql-bin.000001
    
    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;
    /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;
    ......
    SET TIMESTAMP=1560862624/*!*/;
    update role set value=3
    ......
    # End of log file
    /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;
    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;
    
  • row

    執(zhí)行插入操作

    insert into role (name, value) values ('name1', 1), ('name2', 2);
    

    命令行查看結果

    sudo mysqlbinlog --base64-output=decode-rows -v /var/log/mysql/mysql-bin.000001
    
    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;
    /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;
    ......
    ### INSERT INTO `aprint`.`role`
    ### SET
    ###   @1=1
    ###   @2='name1'
    ###   @3=1
    ###   @4=0
    ### INSERT INTO `aprint`.`role`
    ### SET
    ###   @1=2
    ###   @2='name2'
    ###   @3=2
    ###   @4=0
    ......
    # End of log file
    /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;
    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;
    

    更新操作

    update role set value=3;
    

    命令行查看結果

    sudo mysqlbinlog --base64-output=decode-rows -v /var/log/mysql/mysql-bin.000001
    
    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;
    /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;
    ......
    ### UPDATE `aprint`.`role`
    ### WHERE
    ###   @1=1
    ###   @2='name1'
    ###   @3=1
    ###   @4=0
    ### SET
    ###   @1=1
    ###   @2='name1'
    ###   @3=3
    ###   @4=0
    ### UPDATE `aprint`.`role`
    ### WHERE
    ###   @1=2
    ###   @2='name2'
    ###   @3=2
    ###   @4=0
    ### SET
    ###   @1=2
    ###   @2='name2'
    ###   @3=3
    ###   @4=0
    ......
    # End of log file
    /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;
    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;
    
  • mixed

    執(zhí)行插入操作

    insert into role (name, value) values ('name1', 1), ('name2', 2);
    

    命令行查看結果

    sudo mysqlbinlog --base64-output=decode-rows -v /var/log/mysql/mysql-bin.000001
    
    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;
    /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;
    ......
    SET TIMESTAMP=1560862362/*!*/;
    insert into role (name, value) values ('name1', 1), ('name2', 2)
    ......
    # End of log file
    /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;
    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;
    

    更新操作

    update role set value=3;
    

    命令行查看結果

    sudo mysqlbinlog --base64-output=decode-rows -v /var/log/mysql/mysql-bin.000001
    
    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;
    /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;
    ......
    SET TIMESTAMP=1560862439/*!*/;
    update role set value=3
    ......
    # End of log file
    /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;
    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;
    

max_binlog_size

MySQL實例空間內生成binlog日志的規(guī)則如下:

  • 通常情況下施绎,當前binlog大小超過max_binlog_size或超過6小時會切換到下一序號文件繼續(xù)寫入溯革,即寫滿max_binlog_size或超過6小時就會生成新的binlog日志文件。新的binlog文件繼續(xù)寫入谷醉,老的binlog文件并不會立刻上傳致稀,會異步上傳。
  • 有些情況下俱尼,binlog日志不滿max_binlog_size就不再寫入抖单,比如由于命令的執(zhí)行、系統(tǒng)重啟等原因号显。
  • 有些情況下臭猜,會出現binlog文件尺寸超過max_binlog_size的情況,比如當時在執(zhí)行大事務押蚤,不斷寫入binlog導致當前binlog文件尺寸超過max_binlog_size蔑歌。

binlog_do_db

后更要記錄的數據庫名database1,database2以這種格式

?著作權歸作者所有,轉載或內容合作請聯系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市揽碘,隨后出現的幾起案子次屠,更是在濱河造成了極大的恐慌,老刑警劉巖雳刺,帶你破解...
    沈念sama閱讀 218,284評論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件劫灶,死亡現場離奇詭異,居然都是意外死亡掖桦,警方通過查閱死者的電腦和手機本昏,發(fā)現死者居然都...
    沈念sama閱讀 93,115評論 3 395
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來枪汪,“玉大人涌穆,你說我怎么就攤上這事怔昨。” “怎么了宿稀?”我有些...
    開封第一講書人閱讀 164,614評論 0 354
  • 文/不壞的土叔 我叫張陵趁舀,是天一觀的道長。 經常有香客問我祝沸,道長矮烹,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,671評論 1 293
  • 正文 為了忘掉前任罩锐,我火速辦了婚禮奉狈,結果婚禮上,老公的妹妹穿的比我還像新娘唯欣。我一直安慰自己嘹吨,他們只是感情好,可當我...
    茶點故事閱讀 67,699評論 6 392
  • 文/花漫 我一把揭開白布境氢。 她就那樣靜靜地躺著蟀拷,像睡著了一般。 火紅的嫁衣襯著肌膚如雪萍聊。 梳的紋絲不亂的頭發(fā)上问芬,一...
    開封第一講書人閱讀 51,562評論 1 305
  • 那天,我揣著相機與錄音寿桨,去河邊找鬼此衅。 笑死,一個胖子當著我的面吹牛亭螟,可吹牛的內容都是我干的挡鞍。 我是一名探鬼主播,決...
    沈念sama閱讀 40,309評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼预烙,長吁一口氣:“原來是場噩夢啊……” “哼墨微!你這毒婦竟也來了?” 一聲冷哼從身側響起扁掸,我...
    開封第一講書人閱讀 39,223評論 0 276
  • 序言:老撾萬榮一對情侶失蹤翘县,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后谴分,有當地人在樹林里發(fā)現了一具尸體锈麸,經...
    沈念sama閱讀 45,668評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 37,859評論 3 336
  • 正文 我和宋清朗相戀三年牺蹄,在試婚紗的時候發(fā)現自己被綠了忘伞。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 39,981評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖氓奈,靈堂內的尸體忽然破棺而出匿刮,到底是詐尸還是另有隱情,我是刑警寧澤探颈,帶...
    沈念sama閱讀 35,705評論 5 347
  • 正文 年R本政府宣布,位于F島的核電站训措,受9級特大地震影響伪节,放射性物質發(fā)生泄漏。R本人自食惡果不足惜绩鸣,卻給世界環(huán)境...
    茶點故事閱讀 41,310評論 3 330
  • 文/蒙蒙 一怀大、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧呀闻,春花似錦化借、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,904評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至垒手,卻和暖如春蒜焊,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背科贬。 一陣腳步聲響...
    開封第一講書人閱讀 33,023評論 1 270
  • 我被黑心中介騙來泰國打工泳梆, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人榜掌。 一個月前我還...
    沈念sama閱讀 48,146評論 3 370
  • 正文 我出身青樓优妙,卻偏偏與公主長得像,于是被迫代替她去往敵國和親憎账。 傳聞我的和親對象是個殘疾皇子套硼,可洞房花燭夜當晚...
    茶點故事閱讀 44,933評論 2 355

推薦閱讀更多精彩內容