第三十一節(jié)課綜合架構(gòu)備份服務(wù)章節(jié)

  1. 課程知識回顧部分
    1.ping -i -c -f -q
    2.telnet nc nmap -p 掃端口
    3.dns dig nslookup
    4.tcpdump -i -c -nn -x -w -r
    5.克隆的兩種方式 鏈接克隆 完全克隆
    $1=6
    怎么顯示*自增長腳本

!/bin/bash
for((i=1;i<=1;i++)) do for((j=1;j>i;j--))
do
echo -n " "
done
for m in seq 1 $i
do
echo -n "* "
done
echo
done
01 * 4個空格 1個星空格
02 * * 1個空格 2個星空格
03 * * * 0個空格 3個星空格
6.rsync 備份內(nèi)容
rsync 兩地三中心
rsync備份數(shù)據(jù)特點 全量備份 增量備份
rsync的是三種工作模式
本地模式
cp
遠程模式
推模式
rsync 參數(shù) 本地目錄 用戶@地址(主機名):遠程目錄
拉模式
rsync 參數(shù) 用戶@地址(主機名):遠程目錄 本地目錄
守護進程模式
(1)檢查安裝
(2)配置rsync的配置文件
(3)創(chuàng)建虛擬用戶
(4)創(chuàng)建密碼文件 修改權(quán)限 600
(5)創(chuàng)建備份目錄 修改屬主 屬組
(6)重啟服務(wù) 設(shè)置開機啟動

  1. rsync守護進程模式備份數(shù)據(jù)原理 (用戶身份轉(zhuǎn)換過程)
    第一步: 客戶端 --> 服務(wù)端 發(fā)送請求傳輸數(shù)據(jù)信息 執(zhí)行命令 有認證用戶信息 傳輸數(shù)據(jù)信息
    第二部: 服務(wù)端 --> 客戶端 接收到傳輸數(shù)據(jù)信息 審核認證用戶
    發(fā)送回復(fù)信息 需要認證密碼
    第三步: 客戶端 --> 服務(wù)端 發(fā)送請求傳輸數(shù)據(jù)信息 發(fā)送認證密碼信息
    第四步: 服務(wù)端 --> 客戶端 發(fā)送確認信息
    第五步: 客戶端 --> 服務(wù)端 用戶攜帶數(shù)據(jù)通過網(wǎng)絡(luò)進行傳輸 需要對用戶身份進行轉(zhuǎn)換 --> rsync (配置文件指定)
    第六部: 服務(wù)端 --> 客戶端 發(fā)送數(shù)據(jù)存儲完畢確認信息 將數(shù)據(jù)保存到備份目錄中 備份目錄權(quán)限屬主為rsync
    修改備份數(shù)據(jù)屬主和屬組信息 rsync用戶身份修改文件權(quán)限
    錯誤說明:
    chgrp ".hosts.Zb1kyS" (in backup) failed: Operation not permitted (1)
    chgrp change group ownership(修改數(shù)據(jù)屬組信息)

    [oldboy@backup ~]chgrp oldgirl oldboy chgrp: changing group of 'oldboy': Operation not permitted [oldboy@backup ~] chgrp oldgirl /etc/hosts
    chgrp: changing group of '/etc/hosts': Operation not permitted
    解釋說明:
    普通用戶無法修改文件的屬組信息

    補充: 配置文件參數(shù)
    fake super = yes --- 讓指定虛擬用戶偽裝成管理員用戶, 可以強行修改文件屬主屬組權(quán)限信息

  2. rsync命令參數(shù)說明
    -a, --archive archive mode; equals -rlptgoD (no -H,-A,-X)
    歸檔模式參數(shù); 等價于 -rlptgoD
    -r, --recursive recurse into directorie
    遞歸傳輸目錄
    -l, --links copy symlinks as symlinks
    備份傳輸軟鏈接文件保持屬性不變
    -L, --copy-links transform symlink into referent file/dir
    備份傳輸軟連接文件時,會將源文件內(nèi)容信息進行傳輸備份
    -p, --perms preserve permissions
    保持權(quán)限信息不變 644 755
    -t, --times preserve modification times
    保持文件修改時間不變
    -o, --owner preserve owner (super-user only)
    保持文件屬主信息不變
    -g, --group preserve group
    保持文件屬組信息不變
    -D same as --devices --specials
    保持設(shè)備文件屬性信息不變 c b s
    -v, --verbose increase verbosity
    傳輸備份數(shù)據(jù)詳細過程信息
    -P same as --partial --progress
    傳輸進度信息
    --exclude=PATTERN exclude files matching PATTERN
    根據(jù)指定數(shù)據(jù)信息進行排除
    --exclude-from=FILE read exclude patterns from FILE
    根據(jù)指定文件進行批量排除數(shù)據(jù)信息
    --delete delete extraneous files from destination dirs
    進行無差異同步傳輸數(shù)據(jù)
    同步目錄數(shù)據(jù)信息時, 保證目錄中數(shù)據(jù)信息一模一樣
    -z, --compress compress file data during the transfer
    在傳輸數(shù)據(jù)時,對文件進行壓縮傳輸
    --bwlimit=RATE limit socket I/O bandwidth
    限制傳輸速率
    --password-file 實現(xiàn)免交互傳輸數(shù)據(jù)信息

    ============================================================================================
    補充: 客戶端部署過程(rsync)
    第一個里程: 創(chuàng)建生成密碼文件
    echo oldboy123 >/etc/rsync.password
    chmod 600 /etc/rsync.password
    第二個里程: 實現(xiàn)免交互傳輸數(shù)據(jù)
    rsync -avz /oldboy/oldboy.txt rsync_backup@172.16.1.41::backup --password-file=/etc/rsync.password
    sending incremental file list
    oldboy.txt

    sent 93 bytes received 43 bytes 272.00 bytes/sec
    total size is 0 speedup is 0.00
    ============================================================================================

  1. rsync守護進程備份服務(wù)企業(yè)應(yīng)用
    守護進程模式:
    推: 客戶端 -- 數(shù)據(jù)備份 -- 備份服務(wù)器
    拉: 客戶端 -- 數(shù)據(jù)恢復(fù) -- 備份服務(wù)器
    服務(wù)端 -- 數(shù)據(jù)備份 -- 客戶端 (部署rsync守護進程)
    Access via rsync daemon:
    Pull: rsync [OPTION...] [USER@]HOST::SRC... [DEST]
    SRC: 備份服務(wù)器上模塊信息
    DEST: 本地保存數(shù)據(jù)路徑信息
    rsync [OPTION...] rsync://[USER@]HOST[:PORT]/SRC... [DEST]
    Push: rsync [OPTION...] SRC... [USER@]HOST::DEST
    rsync [OPTION...] SRC... rsync://[USER@]HOST[:PORT]/DEST
    企業(yè)多模塊應(yīng)用過程:
    1. 守護進程模式多模塊創(chuàng)建
      第一個里程: 配置文件中創(chuàng)建多個模塊信息
      [sa_backup]
      comment = "backup dir by oldboy"
      path = /backup/sa_dir/
      [dev_backup]
      comment = "backup dir by oldboy"
      path = /backup/dev_dir/
      [dba_backup]
      comment = "backup dir by oldboy"
      path = /backup/dba_dir/
      第二個里程: 確認指定模塊路徑是否存在/權(quán)限是否正確
      第三個里程: 重啟rsync服務(wù)

    2. 守護進程模式數(shù)據(jù)排除功能
      創(chuàng)建測試環(huán)境: 客戶端創(chuàng)建
      [root@nfs01 oldboy]# mkdir /oldboy/oldboy{01..03}
      [root@nfs01 oldboy]# touch /oldboy/oldboy{01..03}/{a..c}.txt
      [root@nfs01 oldboy]# tree /oldboy
      /oldboy
      ├── oldboy01
      │?? ├── a.txt
      │?? ├── b.txt
      │?? └── c.txt
      ├── oldboy02
      │?? ├── a.txt
      │?? ├── b.txt
      │?? └── c.txt
      └── oldboy03
      ├── a.txt
      ├── b.txt
      └── c.txt

      3 directories, 9 files

      需求01: 備份/oldboy目錄數(shù)據(jù)時,將oldboy01目錄進行排除,將oldboy03目錄中的b.txt文件進行排除
      需求02: 備份/oldboy目錄數(shù)據(jù)時,將oldboy01目錄進行排除a.txt oldboy02/b.txt oldboy03/c.txt
      方法一: 利用rsync命令參數(shù)實現(xiàn)
      --exclude
      代碼: rsync -avz /oldboy/ --exclude=oldboy01/ --exclude=oldboy03/b.txt rsync_backup@172.16.1.41::sa_backup --password-file=/etc/rsync.password
      sending incremental file list
      ./
      oldboy02/
      oldboy02/a.txt
      oldboy02/b.txt
      oldboy02/c.txt
      oldboy03/
      oldboy03/a.txt
      oldboy03/c.txt

      sent 420 bytes received 134 bytes 1,108.00 bytes/sec
      total size is 12,288 speedup is 22.18
      說明: 利用--exclude排除數(shù)據(jù)信息,需要利用相對路徑指定需要排除的數(shù)據(jù),相對路徑是相對于同步目錄而言
      方法二: 利用rsync命令參數(shù)實現(xiàn):
      --exclude-from
      第一個里程: 編寫排除數(shù)據(jù)信息文件
      [root@nfs01 oldboy]# cat execlude.txt
      oldboy01/a.txt
      oldboy02/b.txt
      oldboy03/c.txt
      第二個里程: 利用命令參數(shù)進行排除多個數(shù)據(jù)
      [root@nfs01 oldboy]# rsync -avz /oldboy/ --exclude-from=/oldboy/execlude.txt rsync_backup@172.16.1.41::sa_backup --password-file=/etc/rsync.password
      sending incremental file list
      ./
      execlude.txt
      oldboy01/
      oldboy01/b.txt
      oldboy01/c.txt
      oldboy02/
      oldboy02/a.txt
      oldboy02/c.txt
      oldboy03/
      oldboy03/a.txt
      oldboy03/b.txt

      sent 601 bytes received 180 bytes 1,562.00 bytes/sec
      total size is 12,333 speedup is 15.79
      方法三: 利用服務(wù)端配置文件參數(shù)
      exclude --- 指定數(shù)據(jù)進行排除同步 == 客戶端命令參數(shù) --exclude
      exclude from --- 指定多個數(shù)據(jù)排除文件信息,排除多個數(shù)據(jù) == 客戶端命令參數(shù) --exclude-from

      [sa_backup]
      comment = "backup dir by oldboy"
      path = /backup/sa_dir/
      exclude = oldboy01/a.txt oldboy02/b.txt

      [sa_backup]
      comment = "backup dir by oldboy"
      path = /backup/sa_dir/
      exclude from = /backup/sa_dir/execlude.txt
      ====================================================================
      補充: rsyncd.conf配置文件說明
      全局配置: 在模塊上面配置的信息,為全局配置,會影響所有模塊
      局部配置: 在模塊里面配置的信息,為局部配置,只會影響指定模塊
      ====================================================================

    3. 守護進程模式數(shù)據(jù)無差異同步
      --delete
      企業(yè)應(yīng)用: 保證數(shù)據(jù)同步一致 存儲服務(wù)器數(shù)據(jù) == 備份服務(wù)器數(shù)據(jù)
      PS: --delete參數(shù),一定要慎用,容易造成誤刪數(shù)據(jù)

    4. 守護進程模式創(chuàng)建子目錄功能
      [root@nfs01 oldboy]# rsync -avz /etc/hosts rsync_backup@172.16.1.41::sa_backup/oldboy/ --password-file=/etc/rsync.password
      sending incremental file list
      created directory oldboy
      hosts

      sent 219 bytes received 72 bytes 582.00 bytes/sec
      total size is 335 speedup is 1.15

    5. 守護進程模式訪問策略功能
      白名單配置/黑名單配置
      參見圖示

    6. 守護進程模式列表功能說明 (了解)
      list = false --- 可以實現(xiàn)客戶端列表顯示備份服務(wù)端所有模塊信息
      [root@nfs01 oldboy]# rsync rsync_backup@172.16.1.41::
      sa_backup "sa backup dir"
      dev_backup "dev backup dir"
      dba_backup "dba backup dir"

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末呀癣,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子绪颖,更是在濱河造成了極大的恐慌徙赢,老刑警劉巖腺毫,帶你破解...
    沈念sama閱讀 206,482評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異,居然都是意外死亡深寥,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,377評論 2 382
  • 文/潘曉璐 我一進店門贤牛,熙熙樓的掌柜王于貴愁眉苦臉地迎上來惋鹅,“玉大人,你說我怎么就攤上這事殉簸「核牵” “怎么了?”我有些...
    開封第一講書人閱讀 152,762評論 0 342
  • 文/不壞的土叔 我叫張陵喂链,是天一觀的道長返十。 經(jīng)常有香客問我,道長椭微,這世上最難降的妖魔是什么洞坑? 我笑而不...
    開封第一講書人閱讀 55,273評論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮蝇率,結(jié)果婚禮上迟杂,老公的妹妹穿的比我還像新娘。我一直安慰自己本慕,他們只是感情好排拷,可當(dāng)我...
    茶點故事閱讀 64,289評論 5 373
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著锅尘,像睡著了一般监氢。 火紅的嫁衣襯著肌膚如雪布蔗。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 49,046評論 1 285
  • 那天浪腐,我揣著相機與錄音纵揍,去河邊找鬼。 笑死议街,一個胖子當(dāng)著我的面吹牛泽谨,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播特漩,決...
    沈念sama閱讀 38,351評論 3 400
  • 文/蒼蘭香墨 我猛地睜開眼吧雹,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了涂身?” 一聲冷哼從身側(cè)響起雄卷,我...
    開封第一講書人閱讀 36,988評論 0 259
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎访得,沒想到半個月后龙亲,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,476評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡悍抑,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 35,948評論 2 324
  • 正文 我和宋清朗相戀三年鳄炉,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片搜骡。...
    茶點故事閱讀 38,064評論 1 333
  • 序言:一個原本活蹦亂跳的男人離奇死亡拂盯,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出记靡,到底是詐尸還是另有隱情谈竿,我是刑警寧澤,帶...
    沈念sama閱讀 33,712評論 4 323
  • 正文 年R本政府宣布摸吠,位于F島的核電站空凸,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏寸痢。R本人自食惡果不足惜呀洲,卻給世界環(huán)境...
    茶點故事閱讀 39,261評論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望啼止。 院中可真熱鬧道逗,春花似錦、人聲如沸献烦。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,264評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽巩那。三九已至吏夯,卻和暖如春此蜈,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背锦亦。 一陣腳步聲響...
    開封第一講書人閱讀 31,486評論 1 262
  • 我被黑心中介騙來泰國打工舶替, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留令境,地道東北人杠园。 一個月前我還...
    沈念sama閱讀 45,511評論 2 354
  • 正文 我出身青樓,卻偏偏與公主長得像舔庶,于是被迫代替她去往敵國和親抛蚁。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 42,802評論 2 345

推薦閱讀更多精彩內(nèi)容