什么是MySQL主從復(fù)制
簡(jiǎn)單來說就是保證主SQL(Master)和從SQL(Slave)的數(shù)據(jù)是一致性的,向Master插入數(shù)據(jù)后誉券,Slave會(huì)自動(dòng)從Master把修改的數(shù)據(jù)同步過來(有一定的延遲)铸屉,通過這種方式來保證數(shù)據(jù)的一致性院溺,就是主從復(fù)制
MySQL主從能解決什么問題
一诞丽、高可用
因?yàn)閿?shù)據(jù)都是相同的眉菱,所以當(dāng)Master掛掉后迹栓,可以指定一臺(tái)Slave充當(dāng)Master繼續(xù)保證服務(wù)運(yùn)行,因?yàn)閿?shù)據(jù)是一致性的(如果當(dāng)插入Master就掛掉俭缓,可能不一致克伊,因?yàn)橥揭残枰獣r(shí)間),當(dāng)然這種配置不是簡(jiǎn)單的把一臺(tái)Slave充當(dāng)Master华坦,畢竟還要考慮后續(xù)的Salve同步Master愿吹,當(dāng)然本文并不是將高可用的配置,所以這里就不多講了
二惜姐、負(fù)載均衡
因?yàn)樽x寫分離也算是負(fù)載均衡的一種犁跪,所以就不單獨(dú)寫了椿息,因?yàn)橐话愣际怯卸嗯_(tái)Slave的,所以可以將讀操作指定到Slave服務(wù)器上(需要代碼控制)坷衍,然后再用負(fù)載均衡來選擇那臺(tái)Slave來提供服務(wù)寝优,同時(shí)也可以吧一些大量計(jì)算的查詢指定到某臺(tái)Slave,這樣就不會(huì)影響Master的寫入以及其他查詢
三枫耳、數(shù)據(jù)備份
一般我們都會(huì)做數(shù)據(jù)備份乏矾,可能是寫定時(shí)任務(wù),一些特殊行業(yè)可能還需要手動(dòng)備份迁杨,有些行業(yè)要求備份和原數(shù)據(jù)不能在同一個(gè)地方钻心,所以主從就能很好的解決這個(gè)問題,不僅備份及時(shí)铅协,而且還可以多地備份扔役,保證數(shù)據(jù)的安全
四、業(yè)務(wù)模塊化
可以一個(gè)業(yè)務(wù)模塊讀取一個(gè)Slave警医,再針對(duì)不同的業(yè)務(wù)場(chǎng)景進(jìn)行數(shù)據(jù)庫的索引創(chuàng)建和根據(jù)業(yè)務(wù)選擇MySQL存儲(chǔ)引擎
五亿胸、高擴(kuò)展(硬件擴(kuò)展)
主從復(fù)制支持2種擴(kuò)展方式
1、scale-up
向上擴(kuò)展或者縱向擴(kuò)展预皇,主要是提供比現(xiàn)在服務(wù)器更好性能的服務(wù)器侈玄,比如增加CPU和內(nèi)存以及磁盤陣列等,因?yàn)橛卸嗯_(tái)服務(wù)器吟温,所以可擴(kuò)展性比單臺(tái)更大
2序仙、scale-out
向外擴(kuò)展或者橫向擴(kuò)展,是指增加服務(wù)器數(shù)量的擴(kuò)展鲁豪,這樣主要能分散各個(gè)服務(wù)器的壓力
主從復(fù)制的缺點(diǎn)
一潘悼、成本增加
無可厚非的是搭建主從肯定會(huì)增加成本,畢竟一臺(tái)服務(wù)器和兩臺(tái)服務(wù)器的成本完全不同爬橡,另外由于主從必須要開啟二進(jìn)制日志治唤,所以也會(huì)造成額外的性能消耗
二、數(shù)據(jù)延遲
Slave從Master復(fù)制過來肯定是會(huì)有一定的數(shù)據(jù)延遲的糙申,所以當(dāng)剛插入就出現(xiàn)查詢的情況宾添,可能查詢不出來,當(dāng)然如果是插入者自己查詢柜裸,那么可以直接從Master中查詢出來缕陕,當(dāng)然這個(gè)也是需要用代碼來控制的
三、寫入更慢
主從復(fù)制主要是針對(duì)讀遠(yuǎn)大于寫或者對(duì)數(shù)據(jù)備份實(shí)時(shí)性要求較高的系統(tǒng)中疙挺,因?yàn)镸aster在寫中需要更多操作扛邑,而且只有一臺(tái)寫入的Master(因?yàn)槲夷壳爸粫?huì)配置一臺(tái)寫入Master,最多就是有從Master的Slave铐然,用來在Master掛掉后替換成Master蔬崩,平時(shí)不對(duì)外進(jìn)行服務(wù))恶座,所以寫入的壓力并不能被分散,當(dāng)然如果直接怎么解決這個(gè)問題的話舱殿,歡迎留言指教
復(fù)制方式
MySQL5.6開始主從復(fù)制有兩種方式:基于日志(binlog)奥裸、基于GTID(全局事務(wù)標(biāo)示符)险掀。
本文只涉及基于日志binlog的主從配置
復(fù)制原理
1沪袭、Master將數(shù)據(jù)改變記錄到二進(jìn)制日志(binary log)中,也就是配置文件log-bin指定的文件樟氢,這些記錄叫做二進(jìn)制日志事件(binary log events)
2冈绊、Slave通過I/O線程讀取Master中的binary log events并寫入到它的中繼日志(relay log)
3、Slave重做中繼日志中的事件埠啃,把中繼日志中的事件信息一條一條的在本地執(zhí)行一次死宣,完成數(shù)據(jù)在本地的存儲(chǔ),從而實(shí)現(xiàn)將改變反映到它自己的數(shù)據(jù)(數(shù)據(jù)重放)
要求
1碴开、主從服務(wù)器操作系統(tǒng)版本和位數(shù)一致
2毅该、Master和Slave數(shù)據(jù)庫的版本要一致
3、Master和Slave數(shù)據(jù)庫中的數(shù)據(jù)要一致
4潦牛、Master開啟二進(jìn)制日志眶掌,Master和Slave的server_id在局域網(wǎng)內(nèi)必須唯一
具體配置
硬件需求
兩臺(tái)或兩臺(tái)以上安裝了相同版本的MySQL(我沒有試過不同版本會(huì)不會(huì)有問題,有興趣的可以試試)巴碗,當(dāng)然這個(gè)可以用虛擬機(jī)或者Docker代替朴爬,個(gè)人推薦用Docker,比虛擬機(jī)消耗少太多了橡淆,當(dāng)然用起來可能沒有虛擬機(jī)那么方便召噩,但是卻不用挨個(gè)環(huán)境配置了
配置Master
一、安裝數(shù)據(jù)庫
二逸爵、配置my.cnf
不同的系統(tǒng)my.cnf路徑不同具滴,所以我們只講解牽扯修改的地方。添加配置
[mysqld]
## 設(shè)置server_id师倔,一般設(shè)置為IP,注意要唯一
server_id=100
## 復(fù)制過濾:也就是指定哪個(gè)數(shù)據(jù)庫不用同步(mysql庫一般不同步)
binlog-ignore-db=mysql
## 開啟二進(jìn)制日志功能抵蚊,可以隨便取,最好有含義(關(guān)鍵就是這里了)
log-bin=edu-mysql-bin
## 為每個(gè)session 分配的內(nèi)存溯革,在事務(wù)過程中用來存儲(chǔ)二進(jìn)制日志的緩存
binlog_cache_size=1M
## 主從復(fù)制的格式(mixed,statement,row贞绳,默認(rèn)格式是statement)
binlog_format=mixed
## 二進(jìn)制日志自動(dòng)刪除/過期的天數(shù)。默認(rèn)值為0致稀,表示不自動(dòng)刪除冈闭。
expire_logs_days=7
## 跳過主從復(fù)制中遇到的所有錯(cuò)誤或指定類型的錯(cuò)誤,避免slave端復(fù)制中斷抖单。
## 如:1062錯(cuò)誤是指一些主鍵重復(fù)萎攒,1032錯(cuò)誤是因?yàn)橹鲝臄?shù)據(jù)庫數(shù)據(jù)不一致
slave_skip_errors=1062
配置完成后重啟mysql
關(guān)于復(fù)制過濾
復(fù)制過濾可以讓你只復(fù)制服務(wù)器中的一部分?jǐn)?shù)據(jù)遇八,有兩種復(fù)制過濾:
1、在Master上過濾二進(jìn)制日志中的事件
2耍休、在Slave上過濾中繼日志中的事件刃永。
復(fù)制類型
1、基于語句的復(fù)制
在Master上執(zhí)行的SQL語句羊精,在Slave上執(zhí)行同樣的語句斯够。MySQL默認(rèn)采用基于語句的復(fù)制,效率比較高喧锦。一旦發(fā)現(xiàn)沒法精確復(fù)制時(shí)读规,會(huì)自動(dòng)選著基于行的復(fù)制
2、基于行的復(fù)制
把改變的內(nèi)容復(fù)制到Slave燃少,而不是把命令在Slave上執(zhí)行一遍束亏。從MySQL5.0開始支持
3、混合類型的復(fù)制
默認(rèn)采用基于語句的復(fù)制阵具,一旦發(fā)現(xiàn)基于語句的無法精確的復(fù)制時(shí)碍遍,就會(huì)采用基于行的復(fù)制
三、創(chuàng)建數(shù)據(jù)同步用戶
CREATE USER 'slave'@'%' IDENTIFIED BY '123456';
GRANT REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO 'slave'@'%';
這里主要是要授予用戶REPLICATION SLAVE權(quán)限和REPLICATION CLIENT權(quán)限
配置Slave
一阳液、安裝數(shù)據(jù)庫
二怕敬、配置my.cnf
[mysqld]
## 設(shè)置server_id,一般設(shè)置為IP,注意要唯一
server_id=101
## 復(fù)制過濾:也就是指定哪個(gè)數(shù)據(jù)庫不用同步(mysql庫一般不同步)
binlog-ignore-db=mysql
## 開啟二進(jìn)制日志功能趁舀,以備Slave作為其它Slave的Master時(shí)使用
log-bin=edu-mysql-slave1-bin
## 為每個(gè)session 分配的內(nèi)存赖捌,在事務(wù)過程中用來存儲(chǔ)二進(jìn)制日志的緩存
binlog_cache_size=1M
## 主從復(fù)制的格式(mixed,statement,row,默認(rèn)格式是statement)
binlog_format=mixed
## 二進(jìn)制日志自動(dòng)刪除/過期的天數(shù)矮烹。默認(rèn)值為0越庇,表示不自動(dòng)刪除。
expire_logs_days=7
## 跳過主從復(fù)制中遇到的所有錯(cuò)誤或指定類型的錯(cuò)誤奉狈,避免slave端復(fù)制中斷卤唉。
## 如:1062錯(cuò)誤是指一些主鍵重復(fù),1032錯(cuò)誤是因?yàn)橹鲝臄?shù)據(jù)庫數(shù)據(jù)不一致
slave_skip_errors=1062
## relay_log配置中繼日志
relay_log=edu-mysql-relay-bin
## log_slave_updates表示slave將復(fù)制事件寫進(jìn)自己的二進(jìn)制日志
log_slave_updates=1
## 防止改變數(shù)據(jù)(除了特殊的線程)
read_only=1
如果Slave為其它Slave的Master時(shí)仁期,必須設(shè)置bin_log桑驱。配置完成后重啟mysql
完成Master和Slave鏈接
一、初始化數(shù)據(jù)
保證Master和Slave除不同步的數(shù)據(jù)庫跛蛋,其他庫的數(shù)據(jù)一致
二熬的、查詢Master狀態(tài)
在Master中執(zhí)行
show master status;
記錄下返回結(jié)果的File列和Position列的值
三、Slave中設(shè)置Master信息
在Slave中執(zhí)行
change master to master_host='192.168.1.100', master_user='slave', master_password='123456', master_port=3306, master_log_file='edu-mysql-bin.000001', master_log_pos=1389, master_connect_retry=30;
上面執(zhí)行的命令的解釋:
master_host='192.168.1.100' ## Master的IP地址
master_user='slave' ## 用于同步數(shù)據(jù)的用戶(在Master中授權(quán)的用戶)
master_password='123456' ## 同步數(shù)據(jù)用戶的密碼
master_port=3306 ## Master數(shù)據(jù)庫服務(wù)的端口
masterlogfile='edu-mysql-bin.000001' ##指定Slave從哪個(gè)日志文件開始讀復(fù)制數(shù)據(jù)(Master上執(zhí)行命令的結(jié)果的File字段)
masterlogpos=429 ## 從哪個(gè)POSITION號(hào)開始讀(Master上執(zhí)行命令的結(jié)果的Position字段)
masterconnectretry=30 ##當(dāng)重新建立主從連接時(shí)赊级,如果連接建立失敗押框,間隔多久后重試。單位為秒理逊,默認(rèn)設(shè)置為60秒橡伞,同步延遲調(diào)優(yōu)參數(shù)盒揉。
四、查看主從同步狀態(tài)
在Slave中執(zhí)行命令
show slave status;
可看到SlaveIOState為空兑徘, SlaveIORunning和SlaveSQLRunning是No刚盈,表明Slave還沒有開始復(fù)制過程。相反SlaveIORunning和SlaveSQLRunning是Yes表明已經(jīng)開始工作了
五挂脑、開啟主從同步
在Slave中執(zhí)行命令
start slave;
查詢查看主從同步狀態(tài)藕漱,會(huì)發(fā)現(xiàn)SlaveIORunning和SlaveSQLRunning是Yes了,表明開啟成功