作者:Da'sBlog
原文:www.sunhao.win/articles/mysql-replication.html
1. 利用 docker 實現(xiàn) mysql 主從同步 / 讀寫分離
為了保證數(shù)據(jù)的完整和安全,mysql 設(shè)計了主從同步,一個掛掉還可以用另個跃须。最近重構(gòu)論壇,想來改成主從吧娃兽。擔心失誤菇民,就先拿 docker 練練手。
通過本文實際你會操作到投储。
- mysql 的主從同步
- docker 鏡像和容器的創(chuàng)建
- docker 容器間的數(shù)據(jù)傳遞
- mycat 入門
以下需要大于 100 的智商和 mysql 基礎(chǔ) docker 基礎(chǔ)第练,linux 基礎(chǔ)。
沒有也沒事玛荞,就是看著會有點吃力娇掏。
環(huán)境是 centos,mycat 是 1.6.docker 是 1.12.6
1.1 下載 mysql 鏡像
docker pull mysql
// ps:如果下載太慢勋眯,請?zhí)砑域v訊源,依次執(zhí)行
echo "OPTIONS='--registry-mirror=https://mirror.ccs.tencentyun.com'" >> /etc/sysconfig/docker
systemctl daemon-reload
service docker restart
下載完輸入 docker images
REPOSITORY TAG IMAGE ID CREATED SIZE
docker.io/mysql latest 44a8e1a5c0b2 8 days ago 407 MB
1.2 利用 mysql 鏡像婴梧,創(chuàng)建用于主從同步的兩個新鏡像
我們當前所在的服務器叫宿主服務器,
我們要利用 docker 虛擬兩個 docker 容器服務器客蹋,一個主服務器塞蹭,一個從服務器。
1.2.1 創(chuàng)建 master(主) 和 slave(從) 兩個文件夾
/usr/mysql/master
/usr/mysql/slave
1.2.2 在 master 和 slave 文件夾下 創(chuàng)建 Dockerfile 內(nèi)容為
FROM mysql
COPY my.cnf /etc/mysql/
EXPOSE 3306
CMD ["mysqld"]
1.2.3 在 master 文件夾下 創(chuàng)建 my.cnf 內(nèi)容為
[mysqld]
log-bin=mysql-bin //[必須]啟用二進制日志
server-id=1 //[必須]服務器唯一ID讶坯,默認是1番电,一般取IP最后一段,這里看情況分配
1.2.4 在 slave 文件夾下 創(chuàng)建 my.cnf 內(nèi)容為
[mysqld]
log-bin=mysql-bin //[必須]啟用二進制日志
server-id=2 //[必須]服務器唯一ID辆琅,默認是1漱办,一般取IP最后一段担汤,這里看情況分配
1.2.5 切換到 master 目錄下構(gòu)建 master/mysql 鏡像
docker build -t master/mysql .
(命令最后有個.,不要忘記洼冻,代表當前目錄)
1.2.6 然后切換到 slave 目錄下構(gòu)建 slave/mysql 鏡像
docker build -t slave/mysql .
(命令最后有個.崭歧,不要忘記,代表當前目錄)
1.2.7 查看是否創(chuàng)建成功
[root@VM_118_220_centos ~]# docker images
REPOSITORY TAG IMAGE ID CREATED SIZE
slave/mysql latest 8c496048d7ba About an hour ago 407 MB
master/mysql latest 7be30b0b631b 2 hours ago 407 MB
docker.io/mysql latest 44a8e1a5c0b2 8 days ago 407 MB
1.3 用鏡像創(chuàng)建容器
docker run -p 3306 --name mysql-master -e MYSQL_ROOT_PASSWORD=mysql -d master/mysql
docker run -p 3306 --name mysql-slave -e MYSQL_ROOT_PASSWORD=mysql -d slave/mysql
1.3.1 從這里開始撞牢,建議打開兩個終端窗口率碾,方便操作
master 終端執(zhí)行
docker exec -it mysql-master bash
mysql -uroot -p
輸入密碼 mysql 進入到 mysql 環(huán)境
slave 終端執(zhí)行
docker exec -it mysql-slave bash
mysql -uroot -p
輸入密碼 mysql 進入到 mysql 環(huán)境
1.4 mysql 主從配置
mysql 配置
1.4.1 在主容器 mysql 中輸入以下命令:
mysql>GRANT REPLICATION SLAVE ON *.* TO 'user'@'192.168.99.100' IDENTIFIED BY 'mysql';(指定ip)
或者
mysql>GRANT REPLICATION SLAVE ON *.* to 'user'@'%' identified by 'mysql';(所有ip)
然后查看主容器數(shù)據(jù)庫狀態(tài):
mysql> show master status;
+------------------+----------+--------------+------------------+-------------------+
| File | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000003 | 1338 | | | |
+------------------+----------+--------------+------------------+-------------------+
1 row in set (0.00 sec)
記錄 File 的值和 Position 的值。
下面要用到屋彪,到這里為止所宰,主庫千萬不要再做任何操作,防止狀態(tài)改變畜挥。
1.4.2 然后我們配置一下從庫
查看 master/mysql 的對外端口號
docker ps
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
8d1e3b87d499 slave/mysql "docker-entrypoint.sh" 2 hours ago Up 2 hours 0.0.0.0:32769->3306/tcp mysql-slave
980e5ea48152 master/mysql "docker-entrypoint.sh" 2 hours ago Up 2 hours 0.0.0.0:32768->3306/tcp mysql-master
0.0.0.0:32768->3306/tcp 其中 32768 為 master 的端口
mysql>change master to
master_host='x.x.x.x',
master_user='user',
master_log_file='mysql-bin.000003',
master_log_pos=1201,
master_port=32768,
master_password='mysql';
Query OK, 0 rows affected, 2 warnings (0.03 sec)
mysql> start slave;
Query OK, 0 rows affected (0.01 sec)
master_host=’x.x.x.x’ // 這里填 master 主機 ip
master_log_file=’mysql-bin.000003’, // 這里填寫 File 的值
master_log_pos=1338,// 這里填寫 Position 的值仔粥。
mysql> start slave;// 啟動從服務器復制功能
如果不小心配置錯, 輸入 mysql> stop slave; 然后重新錄入一遍
mysql>change master to
master_host='x.x.x.x',
master_user='user',
master_log_file='mysql-bin.000003',
master_log_pos=1201,
master_port=32768,
master_password='mysql';
就可以了
1.5 檢查主從連接狀態(tài)
mysql> show slave status\G
*************************** 1. row ***************************
Slave_IO_State: Waiting for master to send event
Master_Host: x.x.x.x
Master_User: user
Master_Port: 32768
Connect_Retry: 60
Master_Log_File: mysql-bin.000003
Read_Master_Log_Pos: 1338
Relay_Log_File: 8d1e3b87d499-relay-bin.000002
Relay_Log_Pos: 1221
Relay_Master_Log_File: mysql-bin.000003
Slave_IO_Running: Yes
Slave_SQL_Running: Yes
Replicate_Do_DB:
Replicate_Ignore_DB:
Replicate_Do_Table:
Replicate_Ignore_Table:
Replicate_Wild_Do_Table:
Replicate_Wild_Ignore_Table:
Last_Errno: 0
Last_Error:
Skip_Counter: 0
Exec_Master_Log_Pos: 1338
Relay_Log_Space: 1435
Until_Condition: None
Until_Log_File:
Until_Log_Pos: 0
Master_SSL_Allowed: No
Master_SSL_CA_File:
Master_SSL_CA_Path:
Master_SSL_Cert:
Master_SSL_Cipher:
Master_SSL_Key:
Seconds_Behind_Master: 0
Master_SSL_Verify_Server_Cert: No
Last_IO_Errno: 0
Last_IO_Error:
Last_SQL_Errno: 0
Last_SQL_Error:
Replicate_Ignore_Server_Ids:
Master_Server_Id: 1
Master_UUID: cd327a00-5e18-11e7-98f7-0242ac110006
Master_Info_File: /var/lib/mysql/master.info
SQL_Delay: 0
SQL_Remaining_Delay: NULL
Slave_SQL_Running_State: Slave has read all relay log; waiting for more updates
Master_Retry_Count: 86400
Master_Bind:
Last_IO_Error_Timestamp:
Last_SQL_Error_Timestamp:
Master_SSL_Crl:
Master_SSL_Crlpath:
Retrieved_Gtid_Set:
Executed_Gtid_Set:
Auto_Position: 0
Replicate_Rewrite_DB:
Channel_Name:
Master_TLS_Version:
1 row in set (0.00 sec)
這兩個必須是 Yes 為 No 或者 connect 說明沒有連接上
Slave_IO_Running: Yes
Slave_SQL_Running: Yes
1.6 測試主從連接
注意設(shè)置主從后,操作只能在 master 終端上蟹但,slave 上的操作不會同步到 master 上躯泰。
1.6.1 登陸 master 終端
mysql> create database sunhao;
Query OK, 1 row affected (0.01 sec)
mysql> show databases;
+--------------------+
| Database |
+--------------------+
| information_schema |
| mysql |
| performance_schema |
| sunhao |
| sys |
+--------------------+
5 rows in set (0.00 sec)
mysql> use sunhao
Database changed
mysql> create table sunhao(id int(3),name char(10));
Query OK, 0 rows affected (0.04 sec)
mysql> insert into sunhao values(1,'xiaoshuai');
Query OK, 1 row affected (0.01 sec)
mysql> select * from sunhao;
+------+-----------+
| id | name |
+------+-----------+
| 1 | xiaoshuai |
+------+-----------+
1 row in set (0.00 sec)
1.6.2 登陸 slave 服務器
mysql> show databases;
+--------------------+
| Database |
+--------------------+
| information_schema |
| mysql |
| performance_schema |
| sunhao |
| sys |
+--------------------+
5 rows in set (0.00 sec)
mysql> use sunhao
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A
Database changed
mysql> select * from sunhao;
+------+-----------+
| id | name |
+------+-----------+
| 1 | xiaoshuai |
+------+-----------+
1.6.3 如果主服務器已經(jīng)存在應用數(shù)據(jù),則在進行主從復制時华糖,需要單獨復制處理(注意此操作麦向,如果對從服務器單獨錄入的數(shù)據(jù),會被覆蓋掉客叉。):
這里我們做一次完整的測試
(1) 在主服務器數(shù)據(jù)庫插入新的數(shù)據(jù)诵竭,并進行鎖表操作,不讓數(shù)據(jù)再進行寫入動作
mysql> insert into sunhao values(2,'xiaoshuai');
Query OK, 1 row affected (0.01 sec)
mysql> select * from sunhao;
+------+-----------+
| id | name |
+------+-----------+
| 1 | xiaoshuai |
| 2 | xiaoshuai |
+------+-----------+
2 rows in set (0.00 sec)
mysql> FLUSH TABLES WITH READ LOCK;
mysql> show full processlist;
(2) 退出 mysql兼搏,用 mysqldump 備份數(shù)據(jù)文件到 / var/lib, 然后順便多余的用 tar 打包一下玩卵慰。哈哈。
mysql> exit
Bye
root@980e5ea48152:/var/lib/mysql# mysqldump -u root -p sunhao > /var/lib/sunhao.dump
Enter password:
root@980e5ea48152:/var/lib# tar -zcvf ./sunhao.dump .tar ./sunhao.dump
(3) 打開宿主服務器佛呻,復制 mysql 主服務器文件 sunhao.dump.tar裳朋。到宿主服務器
[root]# docker ps
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
8d1e3b87d499 slave/mysql "docker-entrypoint.sh" 4 hours ago Up 4 hours 0.0.0.0:32769->3306/tcp mysql-slave
980e5ea48152 master/mysql "docker-entrypoint.sh" 4 hours ago Up 4 hours 0.0.0.0:32768->3306/tcp mysql-master
mkdir -p /var/mydata
docker cp 980e:/var/lib/sunhao.dump.tar /var/mydata/
cd /var/mydata
[root@VM_128_230_centos mydata]# ls
sunhao.dump.tar
解釋: docker cp 980e:/var/lib/sunhao.dump.tar /var/mydata/
980e 是 980e5ea48152 的縮寫。保證不重復簡寫就可以
980e:/var/lib/sunhao.dump.tar 意思就是選中的容器下面你的文件下的 sunhao.dump.tar 文件
/var/mydata/ 目標文件
(4) 在宿主主機上輸入
[root]# docker cp /var/mydata/sunhao.dump.tar 8d1e3b87d49936414c0e91ffdc60a054e7f4ef8b15baee295350565519abba0e:/var/lib/
(5) 在從服務器上輸入
root@8d1e3b87d499:/# cd /var/lib/
root@8d1e3b87d499:/var/lib# tar -zcvf sunhao.dump.tar
(6) 在從服務器上輸入
tar -zxvpf /var/lib/mysqlbak.sql.tar
mysql -uroot -pmysql sunhao < /var/lib/sunhao.dump;
如果寫入成功, 這個時候就可以用 select 查詢到數(shù)據(jù)件相。
(2) 取消主服務器數(shù)據(jù)庫鎖定
mysql> UNLOCK TABLES;
再扭。氧苍。夜矗。