基于GTID的主從實踐系列之③Percona工具使用(持續(xù)更新)

架構

主:172.17.100.80

從:172.17.100.104

sysbench:172.17.100.100

MySQL版本:5.7.24


首先完成主從的搭建

參考文檔:基于GTID的主從搭建

sysbench創(chuàng)建數(shù)據(jù)到主庫

參考文檔:sysbench安裝及使用

Percona組件的部署

yum install -y perl-DBI perl-DBD-MySQL perl-Time-HiRes perl-IO-Socket-SSL

yum install -y http://www.percona.com/downloads/percona-release/redhat/0.1-4/percona-release-0.1-4.noarch.rpm

yum install -y percona-toolkit

驗證Percona組件部署是否正常

pt-query-digest --help


pt-heartbeat測試復制延遲

#搭建配置

主庫創(chuàng)建數(shù)據(jù)庫pt(自動同步到從庫距帅,從庫無需創(chuàng)建)

create database pt;

在搭建pt組件的機器上執(zhí)行

pt-heartbeat -D pt --update -uroot -p密碼 -P主庫端口 -h主庫IP --create-table --daemonize

創(chuàng)建完成后,在pt庫里會有一張heartbeat表

#查看復制延遲的執(zhí)行

pt-heartbeat -D pt --monitor -uroot -p密碼 -P從庫端口 -h從庫IP

如果把monitor改成check,會只刷新一次

(監(jiān)控復制延遲效果如下赚抡,這是一個sysbench導入時的復制延遲監(jiān)控)

以下圖第一行為例河狐,意思是

延遲時間:當前364秒【334.5秒(1分內平均),214.5秒(5分內平均)积糯,73.83秒(15分內平均)】


pt-table-checksum

主庫:172.17.100.80

從庫:172.17.100.104

Percona組件部署IP:172.17.100.104

到主庫執(zhí)行

GRANT SELECT, DELETE,INSERT,UPDATE, CREATE, DROP, PROCESS, INDEX, SUPER, EXECUTE, REPLICATION SLAVE ON *.* TO ptsum@'%' identified by 'ptsum';

GRANT SELECT, DELETE,INSERT,UPDATE, CREATE, DROP, PROCESS, INDEX, SUPER, EXECUTE, REPLICATION SLAVE ON *.* TO ptsum@localhost identified by 'ptsum';

反正開啟了主從同步跌帐,這玩意也會自己同步到從庫的

老版本的checksum需要自己去建表,新版本則不需要手動建表了翎冲,我這里是新版本垂睬,不存在手動建表的操作

#到部署有Percona組件的機器上執(zhí)行

pt-table-checksum --nocheck-replication-filters --replicate=test.checksums --databases=需要檢測一致性的庫 --no-check-binlog-format h=主庫IP,u=ptsum,p=主庫密碼,P=主庫端口

說明一下上面這條語句

--replicate=test.checksums? ? ?test.checksums表就是我們前面說的新版本自動創(chuàng)建的表,確保別建在業(yè)務庫下就行府适,test庫要存在羔飞;這張表會用來存放每次校對之后的結果,有參數(shù)可以選擇在校對之前清空這張表檐春,具體的不在這里討論

--databases=需要檢測一致性的庫? 比如我要比對主從的sbtest庫是否一致逻淌,則--databases=sbtest

--no-check-binlog-format? 該參數(shù)必須寫上,默認是statement疟暖,但生產(chǎn)庫通常是row格式

前面的語句執(zhí)行結果如下(紅框處為0卡儒,表示數(shù)據(jù)一致)

關于DSN

如果主庫端口和從庫端口不同;或者一個主庫有非常多的從庫俐巴;這種時候很可能出現(xiàn)checksum在連入到主庫之后根本無法找到從庫的情況骨望,這時候就需要添加一條路由來指引從庫了,這也就是DSN

登錄主庫欣舵,仍然使用test庫擎鸠,創(chuàng)建一張dsn表

use test;

CREATE TABLE `dsns` ( `id` int(11) NOT NULL AUTO_INCREMENT,`parent_id` int(11) DEFAULT NULL,`dsn` varchar(255) NOT NULL,PRIMARY KEY (`id`));

insert into dsns values(1,1,'h=slave的IP,u=ptsum,p=ptsum,P=從庫端口');

#到部署有Percona組件的機器上執(zhí)行

pt-table-checksum --nocheck-replication-filters --replicate=test.checksums --databases=sbtest --no-check-binlog-format h=主庫IP,u=ptsum,p=ptsum,P=主庫端口 --recursion-method dsn=t=test.dsns,h=從庫IP,u=ptsum,p=ptsum,P=從庫端口

上面那條語句的意思就是用pt登錄到主庫上,通過讀取主庫dsn里面的路由關系去找到從庫缘圈,然后進行一致性校驗

如果pt在主庫上有部署劣光,那么加粗斜體部分的主庫ip等內容是可以不寫的,但u和p要寫出來糟把,否則會以root方式去登陸mysql

--recursion-method這個參數(shù)就表示會以dsn去尋找從庫了绢涡,后面需要跟上dsn的相關參數(shù)

執(zhí)行效果如下


pt-table-sync

從庫上執(zhí)行操作

delete from sbtest1 limit 10;

此時主庫和從庫的sbtest1表相差10行數(shù)據(jù)

通過checksum查看

#根據(jù)檢查生成的test.checksums進行數(shù)據(jù)的快速恢復

pt-table-sync --execute h=主庫IP,u=root,p=主庫密碼 --replicate test.checksums 主庫hostname

(本來想著主庫的test.checksums也會同步到從庫上,上面的語句試了下h=從庫IP遣疯,執(zhí)行倒是不報錯雄可,但數(shù)據(jù)沒有恢復成功)

執(zhí)行完成后,刪掉的10條數(shù)據(jù)被補全


#如果沒有經(jīng)過checksum缠犀,直接同步2個庫中某個表数苫,則采用下列語句

pt-table-sync --execute h=主庫IP,D=sbtest,t=sbtest1,u=root,p=主庫密碼 h=從庫IP,u=root,p=從庫密碼 --no-check-slave


pt-osc

待續(xù)...

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市辨液,隨后出現(xiàn)的幾起案子文判,更是在濱河造成了極大的恐慌,老刑警劉巖室梅,帶你破解...
    沈念sama閱讀 219,110評論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異,居然都是意外死亡亡鼠,警方通過查閱死者的電腦和手機赏殃,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,443評論 3 395
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來间涵,“玉大人仁热,你說我怎么就攤上這事」戳ǎ” “怎么了抗蠢?”我有些...
    開封第一講書人閱讀 165,474評論 0 356
  • 文/不壞的土叔 我叫張陵,是天一觀的道長思劳。 經(jīng)常有香客問我迅矛,道長,這世上最難降的妖魔是什么潜叛? 我笑而不...
    開封第一講書人閱讀 58,881評論 1 295
  • 正文 為了忘掉前任秽褒,我火速辦了婚禮,結果婚禮上威兜,老公的妹妹穿的比我還像新娘销斟。我一直安慰自己,他們只是感情好椒舵,可當我...
    茶點故事閱讀 67,902評論 6 392
  • 文/花漫 我一把揭開白布蚂踊。 她就那樣靜靜地躺著,像睡著了一般笔宿。 火紅的嫁衣襯著肌膚如雪犁钟。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,698評論 1 305
  • 那天措伐,我揣著相機與錄音特纤,去河邊找鬼。 笑死侥加,一個胖子當著我的面吹牛捧存,可吹牛的內容都是我干的。 我是一名探鬼主播担败,決...
    沈念sama閱讀 40,418評論 3 419
  • 文/蒼蘭香墨 我猛地睜開眼昔穴,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了提前?” 一聲冷哼從身側響起吗货,我...
    開封第一講書人閱讀 39,332評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎狈网,沒想到半個月后宙搬,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體笨腥,經(jīng)...
    沈念sama閱讀 45,796評論 1 316
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 37,968評論 3 337
  • 正文 我和宋清朗相戀三年勇垛,在試婚紗的時候發(fā)現(xiàn)自己被綠了脖母。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 40,110評論 1 351
  • 序言:一個原本活蹦亂跳的男人離奇死亡闲孤,死狀恐怖谆级,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情讼积,我是刑警寧澤肥照,帶...
    沈念sama閱讀 35,792評論 5 346
  • 正文 年R本政府宣布,位于F島的核電站勤众,受9級特大地震影響舆绎,放射性物質發(fā)生泄漏。R本人自食惡果不足惜决摧,卻給世界環(huán)境...
    茶點故事閱讀 41,455評論 3 331
  • 文/蒙蒙 一亿蒸、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧掌桩,春花似錦边锁、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,003評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至则拷,卻和暖如春贡蓖,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背煌茬。 一陣腳步聲響...
    開封第一講書人閱讀 33,130評論 1 272
  • 我被黑心中介騙來泰國打工斥铺, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人坛善。 一個月前我還...
    沈念sama閱讀 48,348評論 3 373
  • 正文 我出身青樓晾蜘,卻偏偏與公主長得像,于是被迫代替她去往敵國和親眠屎。 傳聞我的和親對象是個殘疾皇子剔交,可洞房花燭夜當晚...
    茶點故事閱讀 45,047評論 2 355

推薦閱讀更多精彩內容