2019-04-19 inotify與sersync實時復(fù)制備份

實時復(fù)制實踐:

前提:backup rsync服務(wù)端部署好。

1)部署NFS客戶端

[root@nfs01 ~]# echo 'export RSYNC_PASSWORD=oldboy' >>/etc/bashrc

[root@nfs01 ~]# source /etc/bashrc

[root@nfs01 ~]# echo $RSYNC_PASSWORD

oldboy

測試推送

[root@nfs01 ~]# rsync -avz /data rsync_backup@172.16.1.41::backup/

sending incremental file list

sent 164 bytes? received 25 bytes? 126.00 bytes/sec

total size is 0? speedup is 0.00

2)查看inotify支持情況

[root@nfs01 ~]# uname -r

3.10.0-957.5.1.el7.x86_64

[root@nfs01 ~]#? ls -l /proc/sys/fs/inotify/

總用量 0

-rw-r--r-- 1 root root 0 4月? 19 09:45 max_queued_events

-rw-r--r-- 1 root root 0 4月? 19 09:45 max_user_instances

-rw-r--r-- 1 root root 0 4月? 19 09:45 max_user_watches

3)安裝inotify-tools 工具包

yum install epel-release -y

yum install inotify-tools -y

[root@nfs01 ~]# rpm -ql inotify-tools|head -2

/usr/bin/inotifywait

/usr/bin/inotifywatch

[root@nfs01 ~]# rpm -qa inotify-tools

inotify-tools-3.14-8.el7.x86_64

4)命令參數(shù)和事件知識

inotifywait

在被監(jiān)控的文件或目錄上等待特定文件系統(tǒng)事件(open close delete等)發(fā)生舔株,執(zhí)行后處于阻塞狀態(tài)狭魂,適合在shell腳本中使用

timefmt可用參數(shù)

format可用參數(shù)


inotifywatch

收集被監(jiān)控的文件系統(tǒng)使用的統(tǒng)計數(shù)據(jù)灵再,指文件系統(tǒng)事件發(fā)生的次數(shù)統(tǒng)計摆碉。?

監(jiān)控中事件說明


重要參數(shù)匯總:根據(jù)以上說明洒放,在實際使用時弛车,只要監(jiān)控以下事件即可

create?創(chuàng)建该园、 delete?刪除、 moved_to?移入帅韧、 close_write?修改

5)測試實踐

inotifywait -mrq --timefmt '%d/%m/%y %H:%M' --format '%T %w%f' -e create /data

6)思考:實現(xiàn)數(shù)據(jù)復(fù)制

監(jiān)控哪些事件里初?

增 改 刪 需要監(jiān)控

[root@nfs01 ~]# inotifywait -mrq --format '%w%f' -e close_write,delete /data

/data/a.txt

/data/a.txt

/data/a.txt

7)編寫腳本

mkdir /server/scripts -p

rsync -az --delete /data/ rsync_backup@172.16.1.41::backup

[root@nfs01 /server/scripts]# /bin/sh /server/scripts/monitor1.sh &

[2] 9199

[root@nfs01 /server/scripts]# tail -2 /etc/rc.local

########################

/bin/sh /server/scripts/monitor1.sh &

sersync實踐:

1)客戶端推送成功

rsync -az /data rsync_backup@172.16.1.41::backup

2)部署sersync服務(wù)(NFS)

wget https://github.com/wsgzao/sersync/blob/master/sersync2.5.4_64bit_binary_stable_final.tar.gz

sersync_oldboy_64bit_20160928.tar.gz

[root@nfs01 /server/tools]# mkdir /application -p

[root@nfs01 /server/tools]# mv application/sersync /application/

[root@nfs01 /server/tools]# tree /application/

/application/

└── sersync

? ? ├── bin

? ? │?? └── sersync

? ? ├── conf

? ? │?? ├── confxml.xml

? ? │?? └── confxml.xml.ori

? ? ├── logs

? ? │?? └── rsync_fail_log.sh

? ? └── readme.txt

4 directories, 5 files

[root@nfs01 /server/tools]# cd /application/sersync/

[root@nfs01 /application/sersync]# ls

bin? conf? logs? readme.txt

[root@nfs01 /application/sersync]# cd conf/

[root@nfs01 /application/sersync/conf]# ls

confxml.xml? confxml.xml.ori

3)sersync配置文件:

? ? ? ? 1)完成監(jiān)控配置:

inotifywait -mrq --format '%w%f' -e createFolder,close_write,delete,moveFrom,moveTo /data

? ? ? ? ?2)完整命令拼接:

rsync -az /data --timeout=100 rsync_backup@172.16.1.41::backup

4)啟動服務(wù)

[root@nfs01 /application/sersync/conf]# ../bin/sersync -h

set the system param

execute:echo 50000000 > /proc/sys/fs/inotify/max_user_watches

execute:echo 327679 > /proc/sys/fs/inotify/max_queued_events

parse the command param

_______________________________________________________

參數(shù)-d:啟用守護(hù)進(jìn)程模式

參數(shù)-r:在監(jiān)控前远剩,將監(jiān)控目錄與遠(yuǎn)程主機(jī)用rsync命令推送一遍

c參數(shù)-n: 指定開啟守護(hù)線程的數(shù)量蛮原,默認(rèn)為10個

參數(shù)-o:指定配置文件,默認(rèn)使用confxml.xml文件

參數(shù)-m:單獨啟用其他模塊蔓腐,使用 -m refreshCDN 開啟刷新CDN模塊

參數(shù)-m:單獨啟用其他模塊,使用 -m socket 開啟socket模塊

參數(shù)-m:單獨啟用其他模塊刁品,使用 -m http 開啟http模塊

不加-m參數(shù)泣特,則默認(rèn)執(zhí)行同步程序

________________________________________________________________

[root@nfs01 /application/sersync/conf]# /application/sersync/bin/sersync -d -n 10 -o /application/sersync/conf/confxml.xml

最終

/application/sersync/bin/sersync -d

pkill sersync

二進(jìn)制程序,不是yum安裝的挑随,所以不能systemctl start sersync

配置:systemctl start sersync啟動方案

https://blog.51cto.com/oldboy/2155931

[root@nfs01 /data]# tail -1 /etc/rc.local

/application/sersync/bin/sersync -d

配置:systemctl start sersync啟動方案

https://blog.51cto.com/oldboy/2155931

[root@nfs01 /data]# cat /etc/rc.d/init.d/sersync

#!/bin/bash

# chkconfig: 2345 21 81

# description: rsync service start and stop scripts

# Author: oldboy

# Organization: www.oldboyedu.com

start(){

? ? /application/sersync/bin/sersync -d -o /application/sersync/conf/confxml.xml &>/dev/null

}

stop(){

? ? killall sersync 2>/dev/null

}

case "$1" in

? ? start)

? ? ? ? start

? ? ? ? ;;

? ? stop)

? ? ? ? stop

? ? ? ? ;;

? ? restart)

? ? ? ? stop

? ? ? ? sleep 2

? ? ? ? start

? ? ? ? ;;

? ? *)

? ? ? ? echo $"Usage:$0 {start|stop|restart}"

? ? ? ? exit 1

esac

chmod +x /etc/rc.d/init.d/sersync

[root@nfs01 /data]# cat /usr/lib/systemd/system/sersync.service

[Unit]

Description=sersyncd service

After=network.target

[Service]

Type=forking? ? ? ? ?

ExecStart=/etc/rc.d/init.d/sersync start?

ExecReload=/etc/rc.d/init.d/sersync restart

ExecStop=/etc/rc.d/init.d/sersync stop? ?

PrivateTmp=true

[Install]

WantedBy=multi-user.target

chmod +x /usr/lib/systemd/system/sersync.service

[root@nfs01 /data]# systemctl enable sersync.service

Created symlink from /etc/systemd/system/multi-user.target.wants/sersync.service to /usr/lib/systemd/system/sersync.service.

[root@nfs01 /data]# systemctl status sersync.service

● sersync.service - sersyncd service

? Loaded: loaded (/usr/lib/systemd/system/sersync.service; enabled; vendor preset: disabled)

? Active: inactive (dead)


[root@nfs01 /data]# systemctl stop sersync

[root@nfs01 /data]# ps -ef|grep sersync|grep -v grep

[root@nfs01 /data]# systemctl start sersync


inotify命令同步備份

只要有改變?nèi)客絺浞?/p>


sersync實時同步備份

只同步備份改變的文件

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末状您,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子兜挨,更是在濱河造成了極大的恐慌膏孟,老刑警劉巖,帶你破解...
    沈念sama閱讀 221,820評論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件拌汇,死亡現(xiàn)場離奇詭異柒桑,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)噪舀,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,648評論 3 399
  • 文/潘曉璐 我一進(jìn)店門魁淳,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人与倡,你說我怎么就攤上這事界逛。” “怎么了纺座?”我有些...
    開封第一講書人閱讀 168,324評論 0 360
  • 文/不壞的土叔 我叫張陵仇奶,是天一觀的道長。 經(jīng)常有香客問我比驻,道長该溯,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 59,714評論 1 297
  • 正文 為了忘掉前任别惦,我火速辦了婚禮狈茉,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘掸掸。我一直安慰自己氯庆,他們只是感情好,可當(dāng)我...
    茶點故事閱讀 68,724評論 6 397
  • 文/花漫 我一把揭開白布扰付。 她就那樣靜靜地躺著堤撵,像睡著了一般。 火紅的嫁衣襯著肌膚如雪羽莺。 梳的紋絲不亂的頭發(fā)上实昨,一...
    開封第一講書人閱讀 52,328評論 1 310
  • 那天,我揣著相機(jī)與錄音盐固,去河邊找鬼荒给。 笑死丈挟,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的志电。 我是一名探鬼主播曙咽,決...
    沈念sama閱讀 40,897評論 3 421
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼挑辆!你這毒婦竟也來了例朱?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,804評論 0 276
  • 序言:老撾萬榮一對情侶失蹤鱼蝉,失蹤者是張志新(化名)和其女友劉穎洒嗤,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體蚀乔,經(jīng)...
    沈念sama閱讀 46,345評論 1 318
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 38,431評論 3 340
  • 正文 我和宋清朗相戀三年菲茬,在試婚紗的時候發(fā)現(xiàn)自己被綠了吉挣。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 40,561評論 1 352
  • 序言:一個原本活蹦亂跳的男人離奇死亡婉弹,死狀恐怖睬魂,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情镀赌,我是刑警寧澤氯哮,帶...
    沈念sama閱讀 36,238評論 5 350
  • 正文 年R本政府宣布,位于F島的核電站商佛,受9級特大地震影響喉钢,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜良姆,卻給世界環(huán)境...
    茶點故事閱讀 41,928評論 3 334
  • 文/蒙蒙 一肠虽、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧玛追,春花似錦税课、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,417評論 0 24
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至陆馁,卻和暖如春找颓,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背叮贩。 一陣腳步聲響...
    開封第一講書人閱讀 33,528評論 1 272
  • 我被黑心中介騙來泰國打工叮雳, 沒想到剛下飛機(jī)就差點兒被人妖公主榨干…… 1. 我叫王不留想暗,地道東北人。 一個月前我還...
    沈念sama閱讀 48,983評論 3 376
  • 正文 我出身青樓帘不,卻偏偏與公主長得像说莫,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子寞焙,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 45,573評論 2 359

推薦閱讀更多精彩內(nèi)容