云:白駒蒼狗,聚散離合盯拱,變化萬千巢价。
這是我沒接觸云計(jì)算之前,大自然的云在我心中的形象苦囱,倏忽縹緲,形態(tài)萬千。在接觸云計(jì)算這個(gè)詞之后闹司,更是覺得有太多相似之處,聚散離合之間有無盡可能創(chuàng)造出新的形態(tài)沐飘。我對(duì)于服務(wù)集群的概念游桩,就像是縮小版的云計(jì)算服務(wù),不過是對(duì)企業(yè)內(nèi)部的服務(wù)而已耐朴。
對(duì)于任何一個(gè)互聯(lián)網(wǎng)相關(guān)的公司借卧,數(shù)據(jù)往往是核心,數(shù)據(jù)服務(wù)的穩(wěn)定也是重中之重筛峭。隨著現(xiàn)在公司業(yè)務(wù)上升铐刘,數(shù)據(jù)庫服務(wù)壓力也是急劇增加,頻繁出現(xiàn)數(shù)據(jù)庫宕機(jī)的情況影晓。所以想要采用數(shù)據(jù)集群的方式去分?jǐn)倲?shù)據(jù)庫壓力镰吵,解決這個(gè)技術(shù)瓶頸。(當(dāng)然俯艰,數(shù)據(jù)庫服務(wù)壓力過大捡遍,跟緩存層設(shè)計(jì),以及代碼查詢實(shí)現(xiàn)方式都有解不開的關(guān)系竹握,這一部分也是解決問題的關(guān)鍵點(diǎn))以下測(cè)驗(yàn)在本地docker環(huán)境下實(shí)現(xiàn)画株,并未上線,還請(qǐng)各位知悉。
結(jié)構(gòu)圖示:
1.數(shù)據(jù)節(jié)點(diǎn)管理器(不影響其他服務(wù))谓传;
2.數(shù)據(jù)庫服務(wù)進(jìn)程(可擴(kuò)展)蜈项;
3.數(shù)據(jù)節(jié)點(diǎn)(可擴(kuò)展)。
注:2/3 部分都是可以動(dòng)態(tài)擴(kuò)展续挟,1 的運(yùn)行狀態(tài)不影響2/3提供服務(wù)紧卒;
服務(wù)啟動(dòng)順序
ndb_mgmd ?>>> ?數(shù)據(jù)節(jié)點(diǎn)ndbd ? >>> ?mysql服務(wù)
實(shí)現(xiàn)細(xì)節(jié):
系統(tǒng)環(huán)境:Ubuntu14.04
MySQL Cluster 7.5(mysql5.7.19)
Docker version 1.12.4
docker-compose version 1.14.0
1.mysql-cluster鏡像加載
docker pull mysql/mysql-cluster
2.創(chuàng)建專用虛擬網(wǎng)絡(luò)cluster
docker network create cluster --subnet=192.168.0.0/16
3.啟動(dòng)數(shù)據(jù)管理節(jié)點(diǎn)ndb_mgmd
docker run -d --net=cluster --name=management1 --ip=192.168.0.2 mysql/mysql-cluster ndb_mgmd
4.啟動(dòng)數(shù)據(jù)節(jié)點(diǎn)ndbd
docker run -d --net=cluster --name=ndb1 --ip=192.168.0.3 mysql/mysql-cluster ndbd
docker run -d --net=cluster --name=ndb2 --ip=192.168.0.4 mysql/mysql-cluster ndbd
5.啟動(dòng)mysql服務(wù)節(jié)點(diǎn)
docker run -d --net=cluster --name=mysql1 --ip=192.168.0.10 -e MYSQL_RANDOM_ROOT_PASSWORD=true mysql/mysql-cluster mysqld
6.檢查所有服務(wù)運(yùn)行狀態(tài)
docker ps -a
7.檢查數(shù)據(jù)節(jié)點(diǎn)連接狀態(tài)
docker run -it --net=cluster mysql/mysql-cluster ndb_mgm
Starting ndb_mgm
-- NDB Cluster -- Management Client --
ndb_mgm> show
Connected to Management
Server at: 192.168.0.2:1186
Cluster Configuration
---------------------
[ndbd(NDB)]? ? 2 node(s)
id=2? ? @192.168.0.3? (mysql-5.7.18 ndb-7.6.2, Nodegroup: 0, *)
id=3? ? @192.168.0.4? (mysql-5.7.18 ndb-7.6.2, Nodegroup: 0)
[ndb_mgmd(MGM)]? ? 1 node(s)
id=1? ? @192.168.0.2? (mysql-5.7.18 ndb-7.6.2)
[mysqld(API)]? ? 1 node(s)
id=4? ? @192.168.0.10? (mysql-5.7.18 ndb-7.6.2)
到這里服務(wù)已經(jīng)啟動(dòng),但是想要本地訪問還需要設(shè)置mysqld 服務(wù)允許遠(yuǎn)程登錄诗祸。
連接mysql
###查看隨機(jī)登錄密碼
docker logs mysql1 2>&1 | grep PASSWORD
###連接mysql服務(wù)-mysql1
docker exec -it mysql1 mysql -uroot -p
###修改登錄密碼
ALTER USER 'root'@'localhost' IDENTIFIED BY 'MyNewPass';
###設(shè)置遠(yuǎn)程登錄訪問
GRANT select on *.* to 'root'@'%' identified by "defaultpass";
FLUSH privileges;
動(dòng)態(tài)擴(kuò)展
第一步:確保數(shù)據(jù)節(jié)點(diǎn)和mysql節(jié)點(diǎn)運(yùn)行正常跑芳,在管理節(jié)點(diǎn)服務(wù)器上殺掉管理節(jié)點(diǎn)的進(jìn)程(此時(shí)只殺掉管理節(jié)點(diǎn)進(jìn)程,不會(huì)對(duì)NDB節(jié)點(diǎn)和mysql節(jié)點(diǎn)產(chǎn)生影響直颅,數(shù)據(jù)庫功能一樣可以進(jìn)行運(yùn)行)博个。
第二步:如果只是調(diào)整當(dāng)前數(shù)據(jù)庫的配置參數(shù),可以直接修改/etc/my.cnf功偿,修改完成之后保存盆佣,然后執(zhí)行管理節(jié)點(diǎn)啟動(dòng)命令ndb_mgmd -f /etc/mysql-cluster.cnf啟動(dòng)管理節(jié)點(diǎn)即可,已經(jīng)修改的內(nèi)容即可生效械荷。
如果是需要添加數(shù)據(jù)節(jié)點(diǎn)或者mysql節(jié)點(diǎn)的話共耍。同樣需要先停掉管理節(jié)點(diǎn)的管理進(jìn)程,原有的數(shù)據(jù)節(jié)點(diǎn)和mysql節(jié)無需進(jìn)行任何操作吨瞎。直接在管理服務(wù)器上修改/etc/mysql-cluster.cnf文件痹兜。
比如需要新增兩臺(tái)服務(wù)器192.168.0.5、192.168.0.6來做數(shù)據(jù)節(jié)點(diǎn)颤诀,192.168.0.6來做mysql服務(wù)節(jié)點(diǎn)佃蚜,修改管理節(jié)點(diǎn)上的/etc/mysql-cluster.cnf文件如下:
docker run -d --net=cluster --name=mysql2 --ip=192.168.0.20 -e MYSQL_RANDOM_ROOT_PASSWORD=true mysql/mysql-cluster mysqld
注意事項(xiàng):只需要設(shè)置數(shù)據(jù)節(jié)點(diǎn)的配置文件與mysql1的相同即可,配置文件如下
/etc/mysql-cluster.cnf
++++++++++ADD MYSQLD++++++++++
[ndbd]
NodeId=3
hostname=192.168.0.4
datadir=/var/lib/mysql
[ndbd]
NodeId=4
hostname=192.168.0.5
datadir=/var/lib/mysql
++++++++++++++END++++++++++++
++++++++++ADD MYSQLD++++++++++
[mysqld]
NodeId=7
hostname=192.168.0.20
++++++++++++++END++++++++++++