集群第一階段day33-03-rsync服務(wù)及搭建備份服務(wù)器2(周二)

今天的主角是:web01

實(shí)踐排除復(fù)制:

NFS01:

[root@nfs01 ~]# mkdir /data -p

[root@nfs01 ~]# cd /data

[root@nfs01 /data]# touch {a..d}

[root@nfs01 /data]# ls

a? b? c? d

--exclude 排除參數(shù)

例:排除 a b

[root@nfs01 /data]# rsync -avz /data/ --exclude=a --exclude=b? rsync_backup@172.16.1.41::backup

sending incremental file list

./

c

d

排除1到4

[root@nfs01 /data]# touch {1..5}

[root@nfs01 /data]# rsync -avz /data/ --exclude={1..4}? rsync_backup@172.16.1.41::backup

sending incremental file list

./

5

a

b

[root@nfs01 /data]# rsync -avz /data/ --exclude={1,3,a}? rsync_backup@172.16.1.41::backup

sending incremental file list

2

4

--exclude-from 從文件排除

[root@nfs01 /data]# rsync -avz /data/ --exclude-from=./paichu.txt? rsync_backup@172.16.1.41::backup

sending incremental file list

./

16

17

18

19

20

paichu.txt

實(shí)踐刪除:

rsync作為鏡像糜工,相當(dāng)于raid1实苞,讓兩臺服務(wù)器目錄保持一致裤纹。

--delete 讓兩臺服務(wù)器目錄保持一致

推送:

rsync -avz --delete /data/? rsync_backup@172.16.1.41::backup

本地目錄有啥,遠(yuǎn)端就有啥置逻。

注意:遠(yuǎn)端目錄是不是東西更多,多了東西會被刪除勋锤。提前備份backup對應(yīng)的目錄絮姆。

rsync -avz --delete rsync_backup@172.16.1.41::backup /data/

遠(yuǎn)端有啥。本地目錄就有啥卫袒,注意本地/data目錄宵呛。把/data改成根。提前注意備份本地/data

--partial 支持大文件斷點(diǎn)續(xù)傳

--bwlimit=KBPS 限速夕凝。

企業(yè)案例:

某上市公司宝穗,白天高峰期某DBA人員從數(shù)據(jù)庫服務(wù)器通過rsync將上百GB數(shù)據(jù)復(fù)制到備份服務(wù)器,導(dǎo)致數(shù)據(jù)庫庫服務(wù)器帶寬占滿码秉,造成用戶無法訪問網(wǎng)站的悲劇逮矛。其實(shí)可以利用rsync限速功能,將復(fù)制速度限制在剩余帶寬的1/3或者1/2转砖,可能就不會出現(xiàn)故障了

1)最簡單的實(shí)現(xiàn)须鼎,可以在配置文件結(jié)尾加如下內(nèi)容(特殊底紋部分):

[root@backup ~]# cat /etc/rsyncd.conf

#rsync_config_______________start

#created by oldboy

#site: http://www.oldboyedu.com

uid = rsync

gid = rsync

use chroot = no

fake super = yes

max connections = 200

timeout = 600

pid file = /var/run/rsyncd.pid

lock file = /var/run/rsync.lock

log file = /var/log/rsyncd.log

ignore errors

read only = false

list = false

hosts allow = 172.16.1.0/24

hosts deny = 0.0.0.0/32

auth users = rsync_backup

secrets file = /etc/rsync.password

[backup]

comment = welcome to oldboyedu backup.

path = /backup/

[data]? ? ? ? #<==新模塊。

path = /data/? #<==新備份目錄府蔗。

#除了增加以上兩行外晋控,讀者也可以設(shè)定更多的獨(dú)立配置參數(shù),例如:獨(dú)立虛擬用戶姓赤,獨(dú)立密碼文件等赡译。

2)建立目錄并授權(quán)。

[root@backup ~]# mkdir -p /data

[root@backup ~]# chown -R rsync.rsync /data

[root@backup ~]# ls -ld /data

drwxr-xr-x 2 rsync rsync 6 4月? 16 10:04 /data

3)重啟rsync服務(wù)(只要修改配置不铆,就考慮重載服務(wù))

[root@backup ~]# systemctl restart rsyncd

4)從客戶端訪問測試

[root@backup ~]# ls /data

etc

1蝌焚、內(nèi)部人員產(chǎn)生的數(shù)據(jù)(定時(shí)備份足矣):

程序員開發(fā)代碼(他電腦上)==>代碼服務(wù)上(git/svn代碼版本管理)==>測試環(huán)境測試===>正式環(huán)境

原則上程序代碼可以不備份。

運(yùn)維人員狂男,寫個(gè)定時(shí)任務(wù)综看,寫個(gè)備份腳本,更改或增加服務(wù)配置rsyncd.conf岖食,需要備份

運(yùn)維人員修改配置(測試服務(wù)器)==>代碼服務(wù)器上(git/svn代碼版本管理)==>測試環(huán)境測試===>正式環(huán)境

原則上運(yùn)維人員的變更可以不備份红碑。

2、用戶產(chǎn)生的數(shù)據(jù)(必須實(shí)時(shí)備份)

圖片泡垃、視頻等文件是放在存儲服務(wù)器上的析珊,任意時(shí)刻都可能傳上來,必須實(shí)時(shí)備份蔑穴。

文本(博客文章)忠寻,放在數(shù)據(jù)庫里,存和,任意時(shí)刻都可能發(fā)布奕剃,必須實(shí)時(shí)備份衷旅。

企業(yè)案例:

2.1.2 項(xiàng)目需求說明

某公司里有一臺 web 服務(wù)器,里面的數(shù)據(jù)很重要纵朋,但是如果硬盤壞了柿顶,數(shù)據(jù)

就會丟失,現(xiàn)在領(lǐng)導(dǎo)要求把數(shù)據(jù)做備份操软,這樣 web 服務(wù)器數(shù)據(jù)丟失可以進(jìn)行恢復(fù)嘁锯,

要求如下:

每天晚上 00 點(diǎn)整在 web 服務(wù)器 A 上打包備份系統(tǒng)配置文件、網(wǎng)站程序目錄

及訪問日志并通過 rsync 命令推送到服務(wù)器 B 上備份保留(備份思路可以是先在

本地按日期打包聂薪,然后再推到備份服務(wù)器 B 上)

已知 3 臺服務(wù)器主機(jī)名分別為 web01家乘、backup 、nfs01藏澳,主機(jī)信息見下表:

表 2-7 全網(wǎng)備份主機(jī)信息表

服務(wù)器說明

外網(wǎng) IP(NAT) SSH

內(nèi)網(wǎng) IP(NAT) 交換數(shù)據(jù)

用 主機(jī)名稱

nginx web 服務(wù)器 10.0.0.7/24 172.16.1.7/24 web01

NFS 存儲服務(wù)器 10.0.0.31/24 172.16.1.31/24 nfs01

rsync 備份服務(wù)器 10.0.0.41/24 172.16.1.41/24 backup

? 備份要求

每天晚上 00 點(diǎn)整在 Web 服務(wù)器上打包備份系統(tǒng)配置文件仁锯、網(wǎng)站程序目錄及

訪問日志并通過 rsync 命令推送備份服務(wù)器 backup 上備份保留

2.1.3 具體備份需求

? 所有服務(wù)器的備份目錄必須都為/backup

? 要備份的系統(tǒng)配置文件包括但不限于:

a) 定時(shí)任務(wù)服務(wù)的配置文件 (/var/spool/cron/root) (適合 web 和 nfs 服

務(wù)器)。

b) 開機(jī)自啟動(dòng)的配置文件 (/etc/rc.local) (適合 web 和 nfs 服務(wù)器)笆载。

c) 日常腳本的目錄 (/server/scripts)扑馁。

? Web 服務(wù)器站點(diǎn)目錄假定為/var/html/www,如果沒有可以先模擬創(chuàng)建凉驻。

? Web 服務(wù)器訪問日志路徑假定為/app/logs,如果沒有可以先模擬創(chuàng)建复罐。

? Web 服務(wù)器本地保留打包后的 7 天備份數(shù)據(jù)即可(本地留存不能多于 7 天涝登,

因?yàn)樘嘤脖P會滿) 。

? 備份服務(wù)器 backup 上,保留最近 7 天的備份數(shù)據(jù)效诅,同時(shí)保留 6 個(gè)月內(nèi)每周一

的所有數(shù)據(jù)副本胀滚。

? 備份服務(wù)器上,要按照備份數(shù)據(jù)服務(wù)器的內(nèi)網(wǎng) IP 為目錄保存?zhèn)浞荩瑐浞莸奈?/p>

件按照時(shí)間名字保存乱投。

? 需要確保備份的數(shù)據(jù)盡量完整正確咽笼,在備份服務(wù)器上對備份的數(shù)據(jù)是否完整

進(jìn)行檢查。

? 每天早晨 8:00 把備份成功或失敗結(jié)果信息發(fā)給系統(tǒng)管理員郵箱中

在web01寫腳本:


然后再在nfs寫腳本:


在backup寫腳本:

最后在backup寫定時(shí)任務(wù):


?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末戚炫,一起剝皮案震驚了整個(gè)濱河市剑刑,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌双肤,老刑警劉巖施掏,帶你破解...
    沈念sama閱讀 206,378評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異茅糜,居然都是意外死亡七芭,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,356評論 2 382
  • 文/潘曉璐 我一進(jìn)店門蔑赘,熙熙樓的掌柜王于貴愁眉苦臉地迎上來狸驳,“玉大人预明,你說我怎么就攤上這事“夜浚” “怎么了贮庞?”我有些...
    開封第一講書人閱讀 152,702評論 0 342
  • 文/不壞的土叔 我叫張陵,是天一觀的道長究西。 經(jīng)常有香客問我窗慎,道長,這世上最難降的妖魔是什么卤材? 我笑而不...
    開封第一講書人閱讀 55,259評論 1 279
  • 正文 為了忘掉前任遮斥,我火速辦了婚禮,結(jié)果婚禮上扇丛,老公的妹妹穿的比我還像新娘术吗。我一直安慰自己,他們只是感情好帆精,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,263評論 5 371
  • 文/花漫 我一把揭開白布较屿。 她就那樣靜靜地躺著,像睡著了一般卓练。 火紅的嫁衣襯著肌膚如雪隘蝎。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 49,036評論 1 285
  • 那天襟企,我揣著相機(jī)與錄音嘱么,去河邊找鬼。 笑死顽悼,一個(gè)胖子當(dāng)著我的面吹牛曼振,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播蔚龙,決...
    沈念sama閱讀 38,349評論 3 400
  • 文/蒼蘭香墨 我猛地睜開眼冰评,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了木羹?” 一聲冷哼從身側(cè)響起甲雅,我...
    開封第一講書人閱讀 36,979評論 0 259
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎汇跨,沒想到半個(gè)月后务荆,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,469評論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡穷遂,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 35,938評論 2 323
  • 正文 我和宋清朗相戀三年函匕,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片蚪黑。...
    茶點(diǎn)故事閱讀 38,059評論 1 333
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡盅惜,死狀恐怖中剩,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情抒寂,我是刑警寧澤结啼,帶...
    沈念sama閱讀 33,703評論 4 323
  • 正文 年R本政府宣布,位于F島的核電站屈芜,受9級特大地震影響郊愧,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜井佑,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,257評論 3 307
  • 文/蒙蒙 一属铁、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧躬翁,春花似錦焦蘑、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,262評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至宁舰,卻和暖如春拼卵,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背明吩。 一陣腳步聲響...
    開封第一講書人閱讀 31,485評論 1 262
  • 我被黑心中介騙來泰國打工间学, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人印荔。 一個(gè)月前我還...
    沈念sama閱讀 45,501評論 2 354
  • 正文 我出身青樓,卻偏偏與公主長得像详羡,于是被迫代替她去往敵國和親仍律。 傳聞我的和親對象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,792評論 2 345

推薦閱讀更多精彩內(nèi)容