day31 綜合架構(gòu)備份服務(wù)章節(jié)
課程介紹
1. rsync備份服務(wù)傳輸數(shù)據(jù)原理
2. rsync備份服務(wù)命令參數(shù)說明
3. rsync備份服務(wù)企業(yè)應(yīng)用方式
4. rsync備份服務(wù)常見異常問題
5. rsync備份服務(wù)全網(wǎng)備份項(xiàng)目(上機(jī)測驗(yàn)練習(xí)題)
課程知識回顧部分
1. rsync 分為全量備份 增量備份
2)rsync 有本地備份 遠(yuǎn)程備份 守護(hù)進(jìn)程模式備份三種模式
3)rsync守護(hù)進(jìn)程方式部署
a 確認(rèn)軟件是否安裝/安裝軟件程序
b 編寫配置文件
c 創(chuàng)建虛擬用戶 (不可登錄的虛擬用戶)
d 創(chuàng)建密碼文件(改權(quán)限為600)
e 創(chuàng)建傳輸文件目錄backup (改屬主屬組)
2. rsync守護(hù)進(jìn)程模式備份數(shù)據(jù)原理
第一步: 客戶端 --> 服務(wù)端 發(fā)送請求傳輸數(shù)據(jù)信息 執(zhí)行命令 有認(rèn)證用戶信息 傳輸數(shù)據(jù)信息
第二步: 服務(wù)端 --> 客戶端 接受傳輸數(shù)據(jù)信息 審核認(rèn)證用戶 接著 發(fā)送回復(fù)信息 需要認(rèn)證密碼
第三步: 客戶端 --> 服務(wù)端 發(fā)送請求傳輸數(shù)據(jù)信息 發(fā)送認(rèn)證密碼信息
第四步: 服務(wù)端 --> 客戶端 發(fā)送確認(rèn)信息
第五步: 客戶端 --> 服務(wù)端 用戶攜帶數(shù)據(jù)通過網(wǎng)絡(luò)進(jìn)行傳輸 需要對用戶身份進(jìn)行替換---rsync(配置文件指定)
第六步: 服務(wù)端 --> 客戶端 發(fā)送數(shù)據(jù)存儲(chǔ)完畢確認(rèn)信息 將數(shù)據(jù)保存到備份目錄中 備份目錄權(quán)限屬主為rsync 修改備份目錄的屬主屬組信息
image.png
錯(cuò)誤整合一:
chgrp ".hosts.rFMg5m" (in backup) failed: Operation not permitted (1)
錯(cuò)誤為什么產(chǎn)生?
chgrp(修改數(shù)據(jù)屬組信息) fake super = yes (偽裝超級用戶管理員)此配置未配置好 所以在最后一步將 數(shù)據(jù)保存在備份目錄時(shí)修改備份目錄為屬主屬組信息被阻止 更改配置后錯(cuò)誤消失
rsync命令參數(shù)
-a,--archive(歸檔模式參數(shù);等價(jià)于-rlptgoD)包含此列所有參數(shù)
-r,--recursive(遞歸傳輸目錄)
-l,--links(備份傳輸軟鏈接文件保持屬性不變)只是快捷方式
-L,--copy-links(備份傳輸軟鏈接文件時(shí),會(huì)將源文件內(nèi)容信息進(jìn)行備份)快捷方式指向東西都會(huì)傳
-p,--perms(保持權(quán)限信息不變)644 755
-t,--times(保持文件修改時(shí)間不變)
-g,--group&-o,--owner(保持文件屬組信息不變&屬組信息不變)
-D,--devices(保持設(shè)備文件屬性信息不變 c b s )
-v,--verbose(顯示過程,結(jié)果信息)
-P,--partial(顯示傳輸進(jìn)度信息)
--exclude=PATTERN(根據(jù)指定數(shù)據(jù)信息進(jìn)行單個(gè)排除)
--exclude-from=FILE(根據(jù)指定文件進(jìn)行批量排除數(shù)據(jù)信息)
--delete(進(jìn)行無差異傳輸 同步目錄數(shù)據(jù)時(shí),保證目錄中數(shù)據(jù)信息也是一模一樣)
-z,--compress(在傳輸文件時(shí)進(jìn)行壓縮傳輸,提高傳輸效率)
--bwlimit=RATE(限制傳輸速率)
--password-file(實(shí)現(xiàn)免交互傳輸數(shù)據(jù)信息)
補(bǔ)充:客戶端部署過程
第一個(gè)里程:創(chuàng)建生成密碼文件
echo oldboy:123>/etc/rsync.password
第二個(gè)里程:在客戶端實(shí)現(xiàn)免交互傳輸
reync -avz /oldboy/oldboy.txt rsync_backup@172.16.1.41::backup --password-file=/etc/rsync.password
rsync守護(hù)進(jìn)程備份服務(wù)企業(yè)應(yīng)用
守護(hù)進(jìn)程模式:
推: 客戶端--數(shù)據(jù)備份 --備份服務(wù)器
拉: 客戶端--數(shù)據(jù)恢復(fù) --備份服務(wù)器
服務(wù)端--數(shù)據(jù)備份-- 客戶端(部署rsync守護(hù)進(jìn)程)
企業(yè)多模塊應(yīng)用過程:
1. 守護(hù)進(jìn)程模式多模塊實(shí)現(xiàn)
第一個(gè)里程: 配置文件中創(chuàng)建多個(gè)模塊信息
添加多個(gè)模塊信息 /etc/rsyncd.conf
[sa_backup]
comment = "backup dir by oldboy"
path = /backup/sa_dir/
[dev_backup]
comment = "backup dir by oldboy"
path = /backup/dev_dir/
[dba_backup]
comment = "backup dir by oldboy"
path = /backup/dba_dir/
第二個(gè)里程: 確認(rèn)指定模塊路徑是否存在/權(quán)限是否正確
第三個(gè)里程: 重啟rsync服務(wù)
2. 守護(hù)進(jìn)程數(shù)據(jù)排除功能
方法一:
第一個(gè)里程: 創(chuàng)建環(huán)境
mkdir /oldboy/oldboy{01..03}
touch /oldboy/oldboy{01..03}/{a..c}.txt
第二個(gè)里程: 利用--exclude 排除需要排除的文件相對路徑信息(相對于你要傳輸?shù)奈募乃诼窂?
rsync -avz /oldboy/ --exclude=oldboy01/ --exclude=oldboy03/b.txt rsync_backup@172.16.1.41::sa_backup --password-file=/etc/rsync.password
說明:利用--exclude排除數(shù)據(jù)信息,需要利用相對路徑指定需要排除的數(shù)據(jù),相對路徑是相對于同步目錄而言
方法二:
利用rsync命令參數(shù)實(shí)現(xiàn):
--exclude-from
第一個(gè)里程: 編寫排除數(shù)據(jù)信息文件
[root@nfs01 oldboy]# cat execlude.txt
oldboy01/a.txt
oldboy02/b.txt
oldboy03/c.txt
第二個(gè)里程: 利用命令參數(shù)進(jìn)行排除多個(gè)數(shù)據(jù)
rsync -avz /oldboy/ --exclude from=/oldboy/execlude.txt rsync_backup@172.16.1.41::sa_backup --password-file=/etc/rsync.password
方法三:利用服務(wù)端配置文件參數(shù)
exclude --- 指定數(shù)據(jù)進(jìn)行排除同步 == 客戶端命令參數(shù) --exclude
exclude from --- 指定多個(gè)數(shù)據(jù)排除文件信息,排除多個(gè)數(shù)據(jù) == 客戶端命令參數(shù) --exclude-from
[sa_backup]
comment = "backup dir by oldboy"
path = /backup/sa_dir/
exclude = oldboy01/a.txt oldboy02/b.txt
[sa_backup]
comment = "backup dir by oldboy"
path = /backup/sa_dir/
exclude from = /backup/sa_dir/execlude.txt
補(bǔ)充: rsyncd.conf配置文件說明
全局配置: 在模塊上面配置的信息,為全局配置,會(huì)影響所有模塊
局部配置: 在模塊里面配置的信息,為局部配置,只會(huì)影響指定模塊
3. 守護(hù)進(jìn)程模式數(shù)據(jù)無差異同步
--delete
企業(yè)應(yīng)用: 保證數(shù)據(jù)同步一致 存儲(chǔ)服務(wù)器數(shù)據(jù) == 備份服務(wù)器數(shù)據(jù)
PS: --delete參數(shù),一定要慎用,容易造成誤刪數(shù)據(jù)
4. 守護(hù)進(jìn)程模式創(chuàng)建子目錄功能
[root@nfs01 oldboy]# rsync -avz /etc/hosts rsync_backup@172.16.1.41::sa_backup/oldboy/ --password-file=/etc/rsync.password
sending incremental file list
created directory oldboy
hosts
sent 219 bytes received 72 bytes 582.00 bytes/sec
total size is 335 speedup is 1.15
5. 守護(hù)進(jìn)程模式訪問策略功能
白名單配置/黑名單配置
參見圖示
白/黑名單配置圖示.png
6. 守護(hù)進(jìn)程模式列表功能說明 (了解)
list = false --- 可以實(shí)現(xiàn)客戶端列表顯示備份服務(wù)端所有模塊信息
[root@nfs01 oldboy]# rsync rsync_backup@172.16.1.41::
sa_backup "sa backup dir"
dev_backup "dev backup dir"
dba_backup "dba backup dir"
課程知識總結(jié):
1) rsync服務(wù)傳輸原理
2) rsync服務(wù)命令參數(shù)
3) rsync服務(wù)企業(yè)應(yīng)用
a 多模塊配置應(yīng)用
b 數(shù)據(jù)傳輸排除功能 局部配置/全局配置
c 數(shù)據(jù)傳輸無差異同步
d 創(chuàng)建子目錄功能
e 守護(hù)進(jìn)程訪問策略
f 守護(hù)進(jìn)程列表功能
