前言
前面我們均以單master管理多minion的方式開展學習育叁,在saltstack架構擴展中迅脐,我們將學習如何擴展salt的架構,解決salt在管理大量minion時的擴展問題以及salt master的高可用問題豪嗽。
1谴蔑、salt的多master高可用架構
- salt多master只需要在minion端配置多個master地址即可實現。salt支持多master的配置龟梦,salt多master方式只是讓一臺minion可以同時接受兩臺或多臺master的管理而已隐锭。因此,多個master之間不會有任何感知计贰,也沒有狀態(tài)的同步钦睡,我們只需要自己維護多個master,讓它們的配置文件躁倒、狀態(tài)文件和密鑰文件完全相同荞怒,否則只從minion端配置多個master是無法實現高可用架構的。
- 舊master:192.168.184.132秧秉,新master:192.168.184.139
#### 新master
## yum -y install https://repo.saltstack.com/yum/redhat/salt-repo-2017.7-1.el6.noarch.rpm
## yum install -y salt-master
#### 舊master
## 同步配置文件
rsync -av /etc/salt/master root@192.168.184.139:/etc/salt/
## 同步狀態(tài)文件
rsync -av /srv root@192.168.184.139:/
## 同步密鑰文件:
rsync -av /etc/salt/pki/master/ root@192.168.184.139:/etc/salt/pki
#### minion
## 修改minion的master配置文件褐桌,并重啟minion:
## vim /etc/salt/minion
master:
- 192.168.184.132
- 192.168.184.139
## service salt-minion restart
###### 重啟新的master服務
## service salt-master restart
## salt-key -L
###### 在新的master服務器上查看minion并運行命令
## salt 192.168.184.133 test.ping
- 在生產環(huán)境中,應注意master之間的配置文件象迎、狀態(tài)文件和密鑰文件的實時同步問題荧嵌,可以用比較成熟的rsync+inotify或sersync方式完成實時同步。
2砾淌、syndic方式擴展salt的管理架構
前言
- 通過salt的多master高可用的方式我們可以避免了salt-master的單點問題啦撮,但是如果管理主機的數量非常巨大,那一臺master性能就會出現問題汪厨,這時候我們需要對salt進行多級擴展赃春,用syndic的方式可以完成多級擴展,syndic的擴展架構如上圖骄崩。
- 什么是syndic?它是一種中間層薄辅,接受來自master的任務要拂,然后將任務下發(fā)給所有由syndic管理的minion機器,最后將所有minion執(zhí)行的結果返回給syndic站楚,syndic再將結果發(fā)回給master脱惰。有了syndic作為中間層,大大減輕了master的壓力窿春,不需要master和每一臺被管理的minion直接進行通信拉一。
- 實例配置syndic管理minion
## master:192.168.184.132
## syndic:192.168.184.139
## minion:192.168.184.133 192.168.184.138
###### syndic:192.168.184.139
yum install -y salt-master salt-syndic
#### vim /etc/salt/master
#syndic_master: masterofmasters
syndic_master: 192.168.184.132
/etc/init.d/salt-master start
/etc/init.d/salt-syndic start
###### master:192.168.184.132
#### vim /etc/salt/master
#order_masters: False
order_masters: True
/etc/init.d/salt-master restart
###### minion:192.168.184.133 192.168.184.138
#### vim /etc/salt/minion
#master: salt
master: 192.168.184.139
/etc/init.d/salt-minion restart
- 驗證salt syndic是否與minion端連通(192.168):
[root@139 ~]# salt-key -A
The following keys are going to be accepted:
Unaccepted Keys:
192.168.184.138
192.168.184.133
Proceed? [n/Y] y
Key for minion 192.168.184.138 accepted.
Key for minion 192.168.184.133 accepted.
[root@139 ~]# salt "*" cmd.run "ip a"
192.168.184.133:
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
inet6 ::1/128 scope host
valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
link/ether 00:0c:29:c8:b2:12 brd ff:ff:ff:ff:ff:ff
inet 192.168.184.133/24 brd 192.168.184.255 scope global eth0
inet6 fe80::20c:29ff:fec8:b212/64 scope link
valid_lft forever preferred_lft forever
192.168.184.138:
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
inet6 ::1/128 scope host
valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
link/ether 00:0c:29:81:7c:0a brd ff:ff:ff:ff:ff:ff
inet 192.168.184.138/24 brd 192.168.184.255 scope global eth0
inet6 fe80::20c:29ff:fe81:7c0a/64 scope link
valid_lft forever preferred_lft forever
- 驗證salt-master跟minion端是否連通(syndic端 192.168.184.139主機名變更為139):
[root@localhost ~]# salt-key -A
The following keys are going to be accepted:
Unaccepted Keys:
139
Proceed? [n/Y] y
Key for minion 139 accepted.
[root@localhost ~]# salt "*" cmd.run "ip a"
192.168.184.138:
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
inet6 ::1/128 scope host
valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
link/ether 00:0c:29:81:7c:0a brd ff:ff:ff:ff:ff:ff
inet 192.168.184.138/24 brd 192.168.184.255 scope global eth0
inet6 fe80::20c:29ff:fe81:7c0a/64 scope link
valid_lft forever preferred_lft forever
192.168.184.133:
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
inet6 ::1/128 scope host
valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
link/ether 00:0c:29:c8:b2:12 brd ff:ff:ff:ff:ff:ff
inet 192.168.184.133/24 brd 192.168.184.255 scope global eth0
inet6 fe80::20c:29ff:fec8:b212/64 scope link
valid_lft forever preferred_lft forever
139:
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
inet6 ::1/128 scope host
valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
link/ether 00:0c:29:4b:27:b0 brd ff:ff:ff:ff:ff:ff
inet 192.168.184.139/24 brd 192.168.184.255 scope global eth0
inet6 fe80::20c:29ff:fe4b:27b0/64 scope link
valid_lft forever preferred_lft forever
補充:syndic也可以監(jiān)控自己主機上的minion端(如上所示的minion端139)采盒,操作是更改/etc/salt/minion配置文件的master: 192.168.184.139
==可能會碰到master端緩存了minion_id的問題,執(zhí)行rm -rf /etc/salt/pki/minion/*
即可==
3蔚润、salt的無master模式
[root@138 ~]# salt-call --local cmd.run "whoami"
local:
root
- 通過salt-call加--local參數可直接調用本機模塊磅氨,通常用在調試任務。另外可設置/etc/salt/minion中的file_root和pillar_root參數在本機添加狀態(tài)文件嫡纠,通過salt-call --local state.sls命令來測試文件執(zhí)行情況烦租。
- salt-ssh實現無master管理minion
前言
Anside也是一款集配置管理和遠程執(zhí)行于一身的軟件,并且Anside不需要被管理端安裝任何agent進程除盏,只需要開啟默認的SSH并且安裝了Python即可完成管理任務叉橱,而salt也有這個功能。通過salt的組件salt-ssh工具管理服務器者蠕,被管理的服務器不需要安裝salt-minion窃祝,同時管理端甚至不需要啟動salt-master就能實現大部分salt的功能。但是踱侣,salt-ssh這種通信方式不通過ZeroMQ粪小,而是使用ssh,所以在執(zhí)行速度上相比salt的標準協(xié)議會有非常大的差別泻仙。所以糕再,通常使用salt管理服務器都會用salt的普通架構而不會選用salt-ssh。
2.安裝salt-ssh
## yum install -y salt-ssh
## salt-ssh --version
salt-ssh 2017.7.1 (Nitrogen)
## rpm -ql salt-ssh
/etc/salt/roster
/usr/bin/salt-ssh
/usr/share/man/man1/salt-ssh.1.gz
- 配置roster文件
salt-ssh的配置文件是/etc/salt/roster
## vim /etc/salt/roster
#web1: # id值(例如syndic里的139是一個id值)
# host: 192.168.42.1 # 主機名或主機IP地址
# user: fred # 遠程執(zhí)行用戶
# passwd: foobarbaz # 用戶密碼
# sudo: True # 是否sudo到root用戶
# priv: /etc/salt/pki/master/ssh/salt-ssh.rsa # 私鑰路徑
# timeout:5 # 超時時間
為了避免密碼暴露的風險玉转,通常在使用salt-ssh時需要配置SSH的密鑰登錄方式突想。密碼配置和密鑰認證方式如下例子:
- 密碼方式
[root@139 ~]# vim /etc/salt/roster
# Sample salt-ssh config file
#web1:
# host: 192.168.42.1 # The IP addr or DNS hostname
# user: fred # Remote executions will be executed as user fred
# passwd: foobarbaz # The password to use for login, if omitted, keys are used
# sudo: True # Whether to sudo to root, not enabled by default
#web2:
# host: 192.168.42.2
test:
host: 192.168.184.133
user: root
passwd: xxxxxx
port: 22
## 測試
salt-ssh "*" cmd.run "ip a"
- 密鑰方式
[root@139 ~]# vim /etc/salt/roster
# Sample salt-ssh config file
#web1:
# host: 192.168.42.1 # The IP addr or DNS hostname
# user: fred # Remote executions will be executed as user fred
# passwd: foobarbaz # The password to use for login, if omitted, keys are used
# sudo: True # Whether to sudo to root, not enabled by default
#web2:
# host: 192.168.42.2
test:
host: 192.168.184.133
user: root
priv: /etc/salt/pki/master/ssh/salt-ssh.rsa
port: 22
## 運行salt-ssh命令,第一次運行時需要輸入密碼并復制公鑰到目標服務器
salt-ssh "*" cmd.run "ip a"
4.salt-ssh的使用
salt-ssh支持正則匹配究抓、列表匹配猾担、grains匹配、nodegroup和范圍匹配刺下,可用salt-ssh -h獲得幫助绑嘹。
5.模塊的使用
基本上salt-master能用的模塊在salt-ssh上都能使用
- salt-ssh "*" cmd.run "ip a"
- salt-ssh "*" pkg.install "httpd"
- salt-ssh "*" service.status httpd
- salt-ssh "*" user.add saltssh
- 等等……
6.狀態(tài)管理
- 狀態(tài)文件的使用
salt-ssh "*" state.sls apache
- highstate的應用
salt-ssh "*" state.highstate
總結
本節(jié)主要介紹了salt的架構擴展,通過多master的方式可以實現saltstack高可用架構橘茉,通過syndic作為中間層可以進行多級擴展來解決salt-master的性能問題工腋,結合這兩種方式,saltstack可以擴展出更多的架構畅卓。