day32 ?rsync復(fù)制軟件應(yīng)用與實(shí)踐
1、什么是rsync?
rsync，Rsync英文全稱(chēng)為Remote synchronization? 縮寫(xiě)rsync
是開(kāi)源、高速的、可實(shí)現(xiàn)本地以及遠(yuǎn)程，全量以及增量的數(shù)據(jù)復(fù)制（拷貝）工具菩颖。
2、全量和增量區(qū)別
全量復(fù)制：
[root@nfs01 ~]# cp -a /etc/ /opt/
[root@nfs01 ~]# \cp -a /etc/ /opt
[root@nfs01 ~]# touch /etc/oldboy.txt
[root@nfs01 ~]# \cp -a /etc/ /opt/
增量復(fù)制：
只復(fù)制oldboy.txt
3为障、rsync的作用
工作中需要定時(shí)/實(shí)時(shí)數(shù)據(jù)備份晦闰。本地服務(wù)器目錄、不同機(jī)器鳍怨、
不同機(jī)房之間的數(shù)據(jù)備份呻右。都可以用rsync完成。
4鞋喇、rsync功能特性
? 支持拷貝普通文件與特殊文件声滥，如鏈接文件，設(shè)備文件等侦香。
? 支持排除指定文件或目錄同步的功能落塑，相當(dāng)于打包命令tar的排除功能。
? 可以做到保持原文件或目錄的權(quán)限罐韩、時(shí)間憾赁、軟硬鏈接、屬主散吵、組等所有屬性均不改變龙考。
? 可實(shí)現(xiàn)增量復(fù)制，既只復(fù)制發(fā)生變化的數(shù)據(jù)矾睦，因此數(shù)據(jù)傳輸效率很高洲愤。
? 可以使用rcp,rsh,ssh等方式來(lái)配合進(jìn)行隧道加密傳輸文件（rsync本身不對(duì)數(shù)據(jù)加密）。
? 可以通過(guò)socket(進(jìn)程方式)傳輸文件和數(shù)據(jù)（服務(wù)端和客戶(hù)端）*顷锰。
? 支持匿名或認(rèn)證（無(wú)需系統(tǒng)用戶(hù)）進(jìn)程模式傳輸，安全的進(jìn)行數(shù)據(jù)備份及鏡像
5亡问、增量復(fù)制原理
使用 quick check算法官紫，只對(duì)增量的部分復(fù)制，根據(jù)大小屬性的變化進(jìn)行復(fù)制州藕。
6束世、rsync三種工作模式介紹
1）本地（local）
rsync就是一個(gè)命令
rsync ? [OPTION...] ? ? ? SRC... ? ? [DEST]
rsync命令 參數(shù)選項(xiàng) [源目錄或文件] 目的目錄或文件
命令操作：
a.把數(shù)據(jù)從一個(gè)地方復(fù)制到另一個(gè)地方（僅在一臺(tái)機(jī)器增量）,相當(dāng)于cp。
b.通過(guò)加參數(shù)實(shí)現(xiàn)刪除文件和清空文件內(nèi)容的功能床玻，相當(dāng)于rm命令毁涉。
c.查看屬性信息功能，相當(dāng)于ls锈死。
實(shí)踐：
a.拷貝實(shí)踐
[root@backup ~]# ls /opt
[root@backup ~]# rsync /etc/hosts /opt
[root@backup ~]# ls /opt
hosts
[root@backup ~]# \cp /etc/hosts /opt
保持屬性：
[root@backup ~]# rsync -zrtopg /etc/hosts /opt/
[root@backup ~]# ls -lhi /etc/hosts /opt/hosts
16829878 -rw-r--r--. 1 root root 332 4月? 12 11:24 /etc/hosts
? 71373 -rw-r--r--? 1 root root 332 4月? 12 11:24 /opt/hosts
b.刪除實(shí)踐
刪除文件內(nèi)容：
[root@backup ~]# touch /null.txt #空文件
[root@backup ~]# cat /opt/hosts
127.0.0.1? ? localhost localhost.localdomain localhost4 localhost4.localdomain4
::1? ? ? ? ? localhost localhost.localdomain localhost6 localhost6.localdomain6
172.16.1.5 lb01
172.16.1.6 lb02
172.16.1.7 web01
172.16.1.8 web02
172.16.1.9 web03
172.16.1.31 nfs01
172.16.1.41 backup
172.16.1.51 db01 db01.etiantian.org
172.16.1.61 m01
[root@backup ~]# rsync --delete /null.txt /opt/hosts? #讓前面null.txt和后面hosts一樣
rsync: --delete does not work without --recursive (-r) or --dirs (-d).
rsync error: syntax or usage error (code 1) at main.c(1567) [client=3.1.2]
[root@backup ~]# rsync -r --delete /null.txt /opt/hosts
[root@backup ~]# cat /opt/hosts
刪除目錄下所有文件：
[root@backup ~]# mkdir /null
[root@backup ~]# rsync -r --delete /null/ /opt/? ? ? #讓后面opt和前面null目錄內(nèi)容保持一致
[root@backup ~]# ls /opt/
c.查看屬性
[root@backup ~]# rsync /etc/hosts
-rw-r--r--? ? ? ? ? ? 332 2019/04/12 11:24:41 hosts
2）遠(yuǎn)程Shell模式
借助類(lèi)似ssh隧道傳輸數(shù)據(jù)贫堰，適合不同的機(jī)器之間復(fù)制穆壕。
異地拷貝，相當(dāng)于scp其屏，區(qū)別scp是遠(yuǎn)程全量拷貝)
拉門(mén) 推門(mén) 思考：
pull,拉：從遠(yuǎn)端拉取到本地喇勋。
語(yǔ)法：
rsync ? ? [OPTION...] [USER@]HOST:SRC... ? ? ? ? ? ? [DEST]
rsync命令 參數(shù)選項(xiàng) [認(rèn)證用戶(hù)]@[主機(jī)地址]:[源路徑] 本地路徑
語(yǔ)法：
push,推：從本地推到遠(yuǎn)端。
rsync ? ? [OPTION...]? SRC... [USER@]HOST:[DEST]? ? ? ?
rsync命令 參數(shù)選項(xiàng) 本地路徑 [認(rèn)證用戶(hù)]@[主機(jī)地址]:[目標(biāo)路徑]
push實(shí)踐：
[root@nfs01 ~]# rsync -avz /etc/hosts root@172.16.1.41:/opt/ #加密傳輸偎行。
檢查：
[root@backup ~]# cd /opt/
[root@backup /opt]# ls
hosts
rsync -avz /etc/hosts root@172.16.1.41:/opt/
rsync -avz /etc/hosts -e "ssh -p 22" root@172.16.1.41:/opt/
上述命令是等價(jià)的川背。-e 指定通道? ssh ssh服務(wù)連接客戶(hù)端? -p 22指定22端口。
[root@nfs01 ~]# rsync -avz /etc/hosts -e "ssh -p 22" root@172.16.1.41:/opt/
root@172.16.1.41's password:
sending incremental file list
sent 44 bytes? received 12 bytes? 22.40 bytes/sec
total size is 332? speedup is 5.93
拉的命令：
rsync -avz root@172.16.1.41:/opt/hosts /opt
rsync -avz -e "ssh -p 22" root@172.16.1.41:/opt/hosts /opt
推拉：
a.參照物蛤袒，執(zhí)行命令的機(jī)器
b.root@172.16.1.41 使用的用戶(hù)和主機(jī)熄云，就用主機(jī)和用戶(hù)的密碼。
強(qiáng)調(diào)一個(gè)重點(diǎn)：適合rsync
null和null/ 區(qū)別妙真，null是目錄和目錄下的內(nèi)容缴允，
null/只是目錄下的內(nèi)容，不含本身隐孽。
3）rsync守護(hù)進(jìn)程模式
首先要搭建rsync服務(wù)端(要有守護(hù)進(jìn)程)癌椿，然后才能在客戶(hù)端實(shí)現(xiàn)推拉數(shù)據(jù)。
企業(yè)運(yùn)維的重要模式菱阵，重點(diǎn)講踢俄。
客戶(hù)端語(yǔ)法暫時(shí)不講。
rsync服務(wù)模式：*****開(kāi)啟后臺(tái)進(jìn)程晴及，接受別人訪(fǎng)問(wèn)都办。
7、rsync命令參數(shù)
rsync命令參數(shù)：
-v, --verbose? 顯示輸出過(guò)程
-z, --compress 壓縮
-a, --archive? 多參數(shù)集合(-rtopgDl)
-r, --recursive 遞歸
-t, --times? ? 保持修改時(shí)間屬性
-o, --owner? ? 保持屬主不變
-p, --perms? ? 保持權(quán)限不變
-g, --group? ? 保持用戶(hù)組不變
-l, --links? ? 保持拷貝軟連接
-q, --quiet? ? 安靜的拷貝
--bwlimit=KBPS 限制I/O帶寬虑稼，KBytes per second琳钉。
--delete? ? ? 刪除
--exclude? ? ? 排除
--exclude-from 從文件中排除
企業(yè)常用參數(shù)組合：-avz或者-vzrtopg
8、rsync守護(hù)進(jìn)程模式應(yīng)用實(shí)踐
（1）以下操作都是在backup服務(wù)器
1）安裝
[root@backup ~]# rsync --version
rsync? version 3.1.2? protocol version 31
[root@backup ~]# yum install rsync（不需要）
2）配置配置文件/etc/rsyncd.conf
備份
cp /etc/rsyncd.conf{,.ori}
cat>/etc/rsyncd.conf<<EOF
#rsync_config_______________start
#created by oldboy
#site: http://www.oldboyedu.com
uid = rsync
gid = rsync
use chroot = no
fake super = yes
max connections = 200
timeout = 600
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsync.lock
log file = /var/log/rsyncd.log
ignore errors
read only = false
list = false
hosts allow = 172.16.1.0/24
hosts deny = 0.0.0.0/32
auth users = rsync_backup
secrets file = /etc/rsync.password
[backup]
comment = welcome to oldboyedu backup!
path = /backup/
EOF
man rsync 查命令的參數(shù)
man rsyncd.conf 查配置參數(shù)
https://www.samba.org/ftp/rsync/rsync.html
學(xué)會(huì)獲取知識(shí)的源頭蛛倦「枥粒——老男孩
創(chuàng)建用戶(hù)和備份目錄
[root@backup ~]# useradd rsync
[root@backup ~]# id rsync
uid=1001(rsync) gid=1001(rsync) 組=1001(rsync)
[root@backup ~]# mkdir -p /backup
[root@backup ~]# chown -R rsync.rsync /backup/
[root@backup ~]# ls -ld /backup/
drwxr-xr-x 2 rsync rsync 6 4月? 15 12:12 /backup/
3）啟動(dòng)和檢查
rsync --daemon（c6及以前）
systemctl start rsyncd
systemctl enable rsyncd
systemctl status rsyncd
[root@backup ~]# ps -ef|grep sync|grep -v grep? #檢查進(jìn)程
root? ? ? 7521? ? ? 1? 0 11:39 ?? ? ? ? 00:00:00 /usr/bin/rsync --daemon --no-detach
[root@backup ~]# netstat -lntup|grep 873 #檢查端口
tcp? ? ? ? 0? ? ? 0 0.0.0.0:873? ? ? ? ? ? 0.0.0.0:*? ? ? ? ? ? ? LISTEN? ? ? 7521/rsync? ? ? ? ?
tcp6? ? ? 0? ? ? 0 :::873? ? ? ? ? ? ? ? ? :::*? ? ? ? ? ? ? ? ? ? LISTEN? ? ? 7521/rsync
[root@backup ~]# lsof -i :873 #檢查端口
COMMAND? PID USER? FD? TYPE DEVICE SIZE/OFF NODE NAME
rsync? 7521 root? ? 3u? IPv4? 41439? ? ? 0t0? TCP *:rsync (LISTEN)
rsync? 7521 root? ? 5u? IPv6? 41440? ? ? 0t0? TCP *:rsync (LISTEN)
面試題：如何查看某端口對(duì)應(yīng)什么服務(wù)？答案就是上面兩個(gè)溯壶。
4）配置密碼文件
[root@backup ~]# echo "rsync_backup:oldboy" > /etc/rsync.password
[root@backup ~]# chmod 600 /etc/rsync.password
[root@backup ~]# cat /etc/rsync.password
rsync_backup:oldboy
[root@backup ~]# ls -l /etc/rsync.password
-rw------- 1 root root 20 4月? 15 11:51 /etc/rsync.password
rsync服務(wù)端配置完成及皂。
（2）以下操作都是在客戶(hù)端服務(wù)器
以下方法2選1
方法1：認(rèn)證密碼文件
[root@nfs01 ~]# echo "oldboy" > /etc/rsync.password
[root@nfs01 ~]# chmod 600 /etc/rsync.password
[root@nfs01 ~]# cat /etc/rsync.password
oldboy
[root@nfs01 ~]# ls -l /etc/rsync.password
-rw------- 1 root root 7 4月? 15 11:55 /etc/rsync.password
方法2：
[root@nfs01 ~]# echo ' export RSYNC_PASSWORD=oldboy' >>/etc/bashrc
[root@nfs01 ~]# tail -1 /etc/bashrc
export RSYNC_PASSWORD=oldboy
[root@nfs01 ~]# . /etc/bashrc
[root@nfs01 ~]# echo $RSYNC_PASSWORD
oldboy
rsync客戶(hù)端 nfs01 配置完成
（3）守護(hù)進(jìn)程模式，客戶(hù)端rsync的命令語(yǔ)法：
配置服務(wù)器端守護(hù)進(jìn)程，實(shí)現(xiàn)數(shù)據(jù)傳輸：
1、服務(wù)器端守護(hù)進(jìn)程向叉。2、客戶(hù)端執(zhí)行命令碍拆。
拉門(mén)、推門(mén) 思考：
pull,拉：從遠(yuǎn)端拉取到本地。
語(yǔ)法1（常用）：
rsync ? ? [OPTION...] [USER@]HOST::SRC... ? ? ? ? ? ? ? ? [DEST]
rsync命令 參數(shù)選項(xiàng) [虛擬用戶(hù)]@[主機(jī)地址]::[模塊名] ? ? 本地路徑
語(yǔ)法2:
rsync ? ? [OPTION...] rsync://[USER@]HOST::SRC... ? ? ? ? ? ? ? [DEST]
rsync命令 參數(shù)選項(xiàng) rsync://[虛擬用戶(hù)]@[主機(jī)地址]/[模塊名] 本地路徑
push,推：從本地推到遠(yuǎn)端感混。
語(yǔ)法1（常用）：? ? ? ? ? ? ? ?
rsync ? ? [OPTION...] ? [DEST]? ? ? ? [USER@]HOST::SRC... ? ? ? ? ? ? ? ?
rsync命令 參數(shù)選項(xiàng) ? 本地路徑? ? ? [虛擬用戶(hù)]@[主機(jī)地址]::[模塊名] ? ?
語(yǔ)法2:? ? ? ? ? ? ? ? ? ?
rsync ? ? [OPTION...] ? [DEST] rsync://[USER@]HOST::SRC... ? ? ? ? ? ?
rsync命令 參數(shù)選項(xiàng) ? 本地路徑 rsync://[虛擬用戶(hù)]@[主機(jī)地址]/[模塊名]
（4）測(cè)試成果
錯(cuò)誤1：
[root@nfs01 ~]# rsync -avz /etc/hosts rsync_backup@172.16.1.41::backup --password-file=/etc/rsync.password
@ERROR: invalid uid rsync
rsync error: error starting client-server protocol (code 5) at main.c(1648) [sender=3.1.2]
解答：
[root@backup ~]# useradd rsync
[root@backup ~]# id rsync
uid=1001(rsync) gid=1001(rsync) 組=1001(rsync)
[root@backup ~]# mkdir -p /backup
[root@backup ~]# chown -R rsync.rsync /backup/
[root@backup ~]# ls -ld /backup/
drwxr-xr-x 2 rsync rsync 6 4月? 15 12:12 /backup/
錯(cuò)誤2：
[root@nfs01 ~]# rsync -avz /etc/hosts rsync_backup@172.16.1.41::backup --password-file=/etc/rsync.password
sending incremental file list
hosts
rsync: chgrp ".hosts.YDuTjO" (in backup) failed: Operation not permitted (1)
sent 223 bytes? received 124 bytes? 694.00 bytes/sec
total size is 332? speedup is 0.96
rsync error: some files/attrs were not transferred (see previous errors) (code 23) at main.c(1178) [sender=3.1.2]
解答：增加如下參數(shù)到/etc/rsyncd.conf
fake? super? = yes #不用root用戶(hù)也可以存儲(chǔ)文件的完整屬性端幼。
This allows the full attributes of a file to? be? stored? without having to have the daemon actually running as root.
[root@backup ~]# grep fake /etc/rsyncd.conf
fake super = yes
改完配置，要重啟服務(wù)：
[root@backup ~]# systemctl restart rsyncd
在測(cè)試：成功
[root@nfs01 ~]# rsync -avz /etc/hosts rsync_backup@172.16.1.41::backup --password-file=/etc/rsync.password
sending incremental file list
hosts
sent 89 bytes? received 49 bytes? 276.00 bytes/sec
total size is 332? speedup is 2.41
rsync -avz /etc rsync_backup@172.16.1.41::backup --password-file=/etc/rsync.password
服務(wù)端檢查：
[root@backup ~]# ls /backup/
hosts
[root@backup ~]# ls /backup/
etc? hosts
如果客戶(hù)端按照環(huán)境變量的方式配置浩习，則可以忽略--password-file=/etc/rsync.password參數(shù)静暂。
[root@nfs01 ~]# rsync -avz /etc rsync_backup@172.16.1.41::backup
sending incremental file list
sent 52,071 bytes? received 644 bytes? 105,430.00 bytes/sec
total size is 31,244,350? speedup is 592.70
測(cè)試增量
[root@nfs01 ~]# touch /etc/oldboy.txt
[root@nfs01 ~]# rsync -avz /etc rsync_backup@172.16.1.41::backup
sending incremental file list
etc/oldboy.txt
sent 52,098 bytes? received 655 bytes? 105,506.00 bytes/sec
total size is 31,244,350? speedup is 592.28
day33 ?應(yīng)用實(shí)踐
實(shí)踐排除復(fù)制：
NFS01:
[root@nfs01 ~]# mkdir /data -p
[root@nfs01 ~]# cd /data
[root@nfs01 /data]# touch {a..d}
[root@nfs01 /data]# ls
a? b? c? d
--exclude 排除參數(shù)
例：排除 a b
[root@nfs01 /data]# rsync -avz /data/ --exclude=a --exclude=b? rsync_backup@172.16.1.41::backup
sending incremental file list
./
c
d
排除1到4
[root@nfs01 /data]# touch {1..5}
[root@nfs01 /data]# rsync -avz /data/ --exclude={1..4}? rsync_backup@172.16.1.41::backup
sending incremental file list
./
5
a
b
[root@nfs01 /data]# rsync -avz /data/ --exclude={1,3,a}? rsync_backup@172.16.1.41::backup
sending incremental file list
2
4
--exclude-from 從文件排除
[root@nfs01 /data]# rsync -avz /data/ --exclude-from=./paichu.txt? rsync_backup@172.16.1.41::backup
sending incremental file list
./
16
17
18
19
20
paichu.txt
實(shí)踐刪除：
rsync作為鏡像，相當(dāng)于raid1谱秽，讓兩臺(tái)服務(wù)器目錄保持一致洽蛀。
--delete 讓兩臺(tái)服務(wù)器目錄保持一致
推送：
rsync -avz --delete /data/? rsync_backup@172.16.1.41::backup
本地目錄有啥，遠(yuǎn)端就有啥疟赊。
注意：遠(yuǎn)端目錄是不是東西更多郊供，多了東西會(huì)被刪除。提前備份backup對(duì)應(yīng)的目錄近哟。
rsync -avz --delete rsync_backup@172.16.1.41::backup /data/
遠(yuǎn)端有啥驮审。本地目錄就有啥，注意本地/data目錄吉执。把/data改成根疯淫。提前注意備份本地/data
--partial 支持大文件斷點(diǎn)續(xù)傳
--bwlimit=KBPS 限速。
企業(yè)案例：
某上市公司戳玫，白天高峰期某DBA人員從數(shù)據(jù)庫(kù)服務(wù)器通過(guò)rsync將上百GB數(shù)據(jù)復(fù)制到備份服務(wù)器熙掺，導(dǎo)致數(shù)據(jù)庫(kù)庫(kù)服務(wù)器帶寬占滿(mǎn)，造成用戶(hù)無(wú)法訪(fǎng)問(wèn)網(wǎng)站的悲劇咕宿。其實(shí)可以利用rsync限速功能币绩，將復(fù)制速度限制在剩余帶寬的1/3或者1/2，可能就不會(huì)出現(xiàn)故障了
1）最簡(jiǎn)單的實(shí)現(xiàn)府阀，可以在配置文件結(jié)尾加如下內(nèi)容（特殊底紋部分）：
[root@backup ~]# cat /etc/rsyncd.conf
#rsync_config_______________start
#created by oldboy
#site: http://www.oldboyedu.com
uid = rsync
gid = rsync
use chroot = no
fake super = yes
max connections = 200
timeout = 600
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsync.lock
log file = /var/log/rsyncd.log
ignore errors
read only = false
list = false
hosts allow = 172.16.1.0/24
hosts deny = 0.0.0.0/32
auth users = rsync_backup
secrets file = /etc/rsync.password
[backup]
comment = welcome to oldboyedu backup.
path = /backup/
[data]? ? ? ? #<==新模塊缆镣。
path = /data/? #<==新備份目錄。
#除了增加以上兩行外试浙，讀者也可以設(shè)定更多的獨(dú)立配置參數(shù)董瞻，例如：獨(dú)立虛擬用戶(hù)，獨(dú)立密碼文件等田巴。
2）建立目錄并授權(quán)力细。
[root@backup ~]# mkdir -p /data
[root@backup ~]# chown -R rsync.rsync /data
[root@backup ~]# ls -ld /data
drwxr-xr-x 2 rsync rsync 6 4月? 16 10:04 /data
3）重啟rsync服務(wù)（只要修改配置，就考慮重載服務(wù)）
[root@backup ~]# systemctl restart rsyncd
4）從客戶(hù)端訪(fǎng)問(wèn)測(cè)試
[root@backup ~]# ls /data
etc
1固额、內(nèi)部人員產(chǎn)生的數(shù)據(jù)（定時(shí)備份足矣）：
程序員開(kāi)發(fā)代碼（他電腦上）==>代碼服務(wù)上（git/svn代碼版本管理）==>測(cè)試環(huán)境測(cè)試===>正式環(huán)境
原則上程序代碼可以不備份。
運(yùn)維人員煞聪，寫(xiě)個(gè)定時(shí)任務(wù)斗躏，寫(xiě)個(gè)備份腳本，更改或增加服務(wù)配置rsyncd.conf，需要備份
運(yùn)維人員修改配置（測(cè)試服務(wù)器）==>代碼服務(wù)器上（git/svn代碼版本管理）==>測(cè)試環(huán)境測(cè)試===>正式環(huán)境
原則上運(yùn)維人員的變更可以不備份啄糙。
2笛臣、用戶(hù)產(chǎn)生的數(shù)據(jù)（必須實(shí)時(shí)備份）
圖片、視頻等文件是放在存儲(chǔ)服務(wù)器上的隧饼，任意時(shí)刻都可能傳上來(lái)沈堡，必須實(shí)時(shí)備份。
文本（博客文章）燕雁，放在數(shù)據(jù)庫(kù)里诞丽，，任意時(shí)刻都可能發(fā)布拐格，必須實(shí)時(shí)備份僧免。
第一個(gè)里程碑：
41搭建好rsync服務(wù)，并在31捏浊、7上測(cè)試成功懂衩。
第二個(gè)里程碑 開(kāi)發(fā)腳本打包備份
/backup 備份目錄
/var/spool/cron/root /etc/rc.local /server/scripts /var/html/www /app/logs 需要備份的內(nèi)容
模擬創(chuàng)建:
[root@nfs01 ~]# mkdir -p /server/scripts
[root@web01 ~]# mkdir -p /server/scripts /var/html/www /app/logs
web01:
[root@web01 ~]# mkdir -p /backup
[root@web01 ~]# ls -ld /backup/
drwxr-xr-x 2 root root 6 4月? 16 11:36 /backup/
[root@web01 /]# tar zcvhf /backup/bak_$(date +%F_%w).tar.gz /var/spool/cron/root /etc/rc.local /server/scripts /var/html/www /app/logs
tar: 從成員名中刪除開(kāi)頭的“/”
/var/spool/cron/root
/etc/rc.local
/server/scripts/
/var/html/www/
/app/logs/
[root@web01 /]# ls /backup/
bak_2019-04-16_2.tar.gz
寫(xiě)腳本：
[root@web01 /]# mkdir /server/scripts/ -p
[root@web01 /]# cd /server/scripts/
[root@web01 /server/scripts]# cat? /server/scripts/bak.sh
[root@web01 /server/scripts]# cat bak.sh
#!/bin/sh
export PATH="/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root/bin"
export RSYNC_PASSWORD=oldboy
IP=$(hostname -i)
mkdir -p /backup/$IP
#1.打包
tar zchf /backup/$IP/bak_$(date +%F_%w).tar.gz /var/spool/cron/root /etc/rc.local /server/scripts /var/html/www /app/logs &>/dev/null &&\
#2.刪除
find /backup/ -type f -name "*.tar.gz" -mtime +7|xargs rm -f &&\
#3.推送
rsync -az /backup/ rsync_backup@172.16.1.41::backup &>/dev/null
[root@web01 /server/scripts]# /bin/sh /server/scripts/bak.sh
[root@web01 /server/scripts]# ls /backup/
bak_2019-04-16_2.tar.gz
定時(shí)任務(wù)：
[root@web01 /server/scripts]# crontab -e
[root@web01 /server/scripts]# crontab -l|tail -2
######back.....
00 00 * * * /bin/sh /server/scripts/bak.sh >/dev/null 2>&1
[root@web01 /server/scripts]# find /backup/ -type f -name "*.tar.gz" -mtime +7|xargs rm -f
確保備份完整。
做flag和采集指紋
[root@nfs01 /server/scripts]# #采集人的指紋
[root@nfs01 /server/scripts]# md5sum oldboy.txt >zhiwen.log
[root@nfs01 /server/scripts]# cat zhiwen.log
348bd3ce10ec00ecc29d31ec97cd5839? oldboy.txt
[root@nfs01 /server/scripts]# #校驗(yàn)
[root@nfs01 /server/scripts]# md5sum -c zhiwen.log
oldboy.txt: 確定
[root@web01 /server/scripts]# cat bak.sh
#!/bin/sh
export PATH="/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root/bin"
export RSYNC_PASSWORD=oldboy
IP=$(hostname -i)
mkdir -p /backup/$IP
#1.打包
tar zchf /backup/$IP/bak_${IP}_$(date +%F_%w).tar.gz /var/spool/cron/root /etc/rc.local /server/scripts /var/html/www /app/logs &>/dev/null &&\
touch /backup/$IP/bak_${IP}_$(date +%F_%w).flag &&\
#采集指紋
find /backup/ -type f -name "*.tar.gz"|xargs md5sum >/backup/$IP/bak_${IP}_$(date +%F_%w).flag &&\
#2.刪除
find /backup/ -type f -name "*.tar.gz" -mtime +7|xargs rm -f &&\
#3.推送
rsync -az /backup/ rsync_backup@172.16.1.41::backup &>/dev/null
bak_172.16.1.7_2019-04-16_2.tar.gz?
bak_172.16.1.7_2019-04-17_3.tar.gz?
bak_172.16.1.7_2019-04-18_4.tar.gz?
bak_172.16.1.7_2019-04-16_2.tar.gz?
day34 ?NFS 文件系統(tǒng)
1金踪、什么是NFS浊洞？
全稱(chēng) network file system 網(wǎng)絡(luò)文件系統(tǒng)
通過(guò)網(wǎng)絡(luò)存儲(chǔ)和組織文件的一種方法或機(jī)制。
什么是文件系統(tǒng)胡岔？
2法希、為什么要用共享存儲(chǔ)？
前端所有的應(yīng)用服務(wù)器接收到用戶(hù)上傳的圖片姐军、文件铁材、視頻，都會(huì)統(tǒng)一
的放到后端的存儲(chǔ)上奕锌。
為什么要共享著觉？所有節(jié)點(diǎn)服務(wù)器都需要將內(nèi)容存到存儲(chǔ)上，取的統(tǒng)一來(lái)取惊暴。
3饼丘、共享存儲(chǔ)的種類(lèi)
單點(diǎn)存儲(chǔ)系統(tǒng)就是NFS，中小型企業(yè)辽话，阿里云服務(wù)的NAS服務(wù)肄鸽，OSS對(duì)象存儲(chǔ)。
NFS性能不太高油啤。
大型企業(yè)會(huì)用分布式存儲(chǔ)FastDFS典徘、Ceph、GlsterFS益咬、Mfs
大型存儲(chǔ)廠商：EMC逮诲、Netapp 幾十萬(wàn)。
藝龍旅行網(wǎng) 存儲(chǔ)用的EMC 傳統(tǒng)企業(yè)。
硬件存儲(chǔ)：傳統(tǒng)企業(yè)：穩(wěn)定梅鹦、2臺(tái) 雙主機(jī)頭 幾十塊硬盤(pán) RAID10裆甩。
BAT 曾經(jīng)用硬件，超貴齐唆、
阿里云 去IOE Ibm Orace EMC
4嗤栓、NFS工作原理
NFS網(wǎng)絡(luò)文件系統(tǒng)
啟動(dòng)NFS服務(wù)，而且還有啟動(dòng)很多端口箍邮。
NFS功能茉帅，需要很多服務(wù)。每個(gè)服務(wù)都有端口媒殉，而且經(jīng)常變化担敌。
如何讓客戶(hù)端找到這些端口呢？就需要一個(gè)經(jīng)紀(jì)人（rpc服務(wù)）
NFS服務(wù)：
1廷蓉、NFS服務(wù)（有很多進(jìn)程和端口）全封，把自己的端口告訴RPC。
2桃犬、RPC服務(wù)（對(duì)外固定端口111）
客戶(hù)端請(qǐng)求NFS服務(wù)刹悴，先找RPC 111，查到NFS的端口攒暇，發(fā)給客戶(hù)土匀。
原理見(jiàn)圖：
5、安裝
服務(wù)器端和客戶(hù)端都要安裝：
yum install nfs-utils rpcbind -y
rpm -qa nfs-utils rpcbind
[root@nfs01 ~]# rpm -qa nfs-utils rpcbind
nfs-utils-1.3.0-0.61.el7.x86_64
rpcbind-0.2.0-47.el7.x86_64
啟動(dòng)RPC
[root@nfs01 ~]# systemctl start rpcbind.service
[root@nfs01 ~]# systemctl enable rpcbind.service
看看有沒(méi)有注冊(cè)的端口
[root@nfs01 ~]# rpcinfo -p 127.0.0.1
? program vers proto? port? service
? ? 100000? ? 4? tcp? ? 111? portmapper
? ? 100000? ? 3? tcp? ? 111? portmapper
? ? 100000? ? 2? tcp? ? 111? portmapper
? ? 100000? ? 4? udp? ? 111? portmapper
? ? 100000? ? 3? udp? ? 111? portmapper
? ? 100000? ? 2? udp? ? 111? portmapper
啟動(dòng)NFS
[root@nfs01 ~]# systemctl start nfs
[root@nfs01 ~]# systemctl enable nfs
[root@nfs01 ~]# rpcinfo -p 127.0.0.1
? program vers proto? port? service
? ? 100000? ? 4? tcp? ? 111? portmapper
? ? 100000? ? 3? tcp? ? 111? portmapper
? ? 100000? ? 2? tcp? ? 111? portmapper
? ? 100000? ? 4? udp? ? 111? portmapper
? ? 100000? ? 3? udp? ? 111? portmapper
? ? 100000? ? 2? udp? ? 111? portmapper
? ? 100024? ? 1? udp? 44521? status
? ? 100024? ? 1? tcp? 59204? status
? ? 100005? ? 1? udp? 20048? mountd
? ? 100005? ? 1? tcp? 20048? mountd
? ? 100005? ? 2? udp? 20048? mountd
? ? 100005? ? 2? tcp? 20048? mountd
? ? 100005? ? 3? udp? 20048? mountd
? ? 100005? ? 3? tcp? 20048? mountd
? ? 100003? ? 3? tcp? 2049? nfs
? ? 100003? ? 4? tcp? 2049? nfs
? ? 100227? ? 3? tcp? 2049? nfs_acl
? ? 100003? ? 3? udp? 2049? nfs
? ? 100003? ? 4? udp? 2049? nfs
? ? 100227? ? 3? udp? 2049? nfs_acl
? ? 100021? ? 1? udp? 55758? nlockmgr
? ? 100021? ? 3? udp? 55758? nlockmgr
? ? 100021? ? 4? udp? 55758? nlockmgr
? ? 100021? ? 1? tcp? 30472? nlockmgr
? ? 100021? ? 3? tcp? 30472? nlockmgr
? ? 100021? ? 4? tcp? 30472? nlockmgr
[root@nfs01 ~]# netstat -lntup|egrep "rpc|nfs" 過(guò)濾rpc和nfs的端口
tcp? ? ? ? 0? ? ? 0 0.0.0.0:20048? ? ? ? ? 0.0.0.0:*? ? ? LISTEN? ? ? 9516/rpc.mountd? ?
tcp? ? ? ? 0? ? ? 0 0.0.0.0:59204? ? ? ? ? 0.0.0.0:*? ? ? LISTEN? ? ? 9463/rpc.statd? ? ?
tcp6? ? ? 0? ? ? 0 :::20048? ? ? ? ? ? ? ? :::*? ? ? ? ? LISTEN? ? ? 9516/rpc.mountd? ?
tcp6? ? ? 0? ? ? 0 :::14450? ? ? ? ? ? ? ? :::*? ? ? ? ? LISTEN? ? ? 9463/rpc.statd? ? ?
udp? ? ? ? 0? ? ? 0 0.0.0.0:44521? ? ? ? ? 0.0.0.0:*? ? ? ? ? ? ? ? ? 9463/rpc.statd? ? ?
udp? ? ? ? 0? ? ? 0 0.0.0.0:20048? ? ? ? ? 0.0.0.0:*? ? ? ? ? ? ? ? ? 9516/rpc.mountd? ?
udp? ? ? ? 0? ? ? 0 0.0.0.0:695? ? ? ? ? ? 0.0.0.0:*? ? ? ? ? ? ? ? ? 9424/rpcbind? ? ? ?
udp? ? ? ? 0? ? ? 0 127.0.0.1:735? ? ? ? ? 0.0.0.0:*? ? ? ? ? ? ? ? ? 9463/rpc.statd? ? ?
udp6? ? ? 0? ? ? 0 :::20048? ? ? ? ? ? ? ? :::*? ? ? ? ? ? ? ? ? ? ? 9516/rpc.mountd? ?
udp6? ? ? 0? ? ? 0 :::695? ? ? ? ? ? ? ? ? :::*? ? ? ? ? ? ? ? ? ? ? 9424/rpcbind? ? ? ?
udp6? ? ? 0? ? ? 0 :::4835? ? ? ? ? ? ? ? :::*? ? ? ? ? ? ? ? ? ? ? 9463/rpc.statd
6形用、配置nfs
NFS配置文件 /etc/exports
[root@nfs01 ~]# man exportsiiii
EXAMPLE
? ? ? # sample /etc/exports file
? ? ? /? ? ? ? ? ? ? master(rw) trusty(rw,no_root_squash)
? ? ? /projects? ? ? proj*.local.domain(rw)
? ? ? /usr? ? ? ? ? ? *.local.domain(ro) @trusted(rw)
? ? ? /home/joe? ? ? pc001(rw,all_squash,anonuid=150,anongid=100)
? ? ? /pub? ? ? ? ? ? *(ro,insecure,all_squash)
? ? ? /srv/www? ? ? ? -sync,rw server @trusted @external(ro)
? ? ? /foo? ? ? ? ? ? 2001:db8:9:e54::/64(rw) 192.0.2.0/24(rw)
? ? ? /build? ? ? ? ? buildhost[0-9].local.domain(rw)
? ? ? 待共享的目錄? ? 訪(fǎng)問(wèn)的主機(jī)(權(quán)限)
1）待共享的目錄 存東西的目錄 取東西的目錄例如：/data
2）訪(fǎng)問(wèn)的主機(jī)就轧，
? 172.16.1.7（web01）? ? 單個(gè)主機(jī)
? 172.16.1.0/24 網(wǎng)段
? 172.16.1.*? ? 網(wǎng)段
? master 主機(jī)名
3)()權(quán)限
? rw 可讀寫(xiě) read write
? ro 只讀 read only
? sync 寫(xiě)到磁盤(pán)才算完成，安全 慢
? async 異步寫(xiě)到遠(yuǎn)程緩沖區(qū)田度，快 不安全
? 一會(huì)再說(shuō)妒御。。镇饺。乎莉。
實(shí)踐：
[root@nfs01 ~]# tail -1 /etc/exports
/data 172.16.1.0/24(rw,sync)
[root@nfs01 ~]# mkdir -p /data
[root@nfs01 ~]# ls -ld /data
drwxr-xr-x 2 root root 51 4月? 16 10:24 /data
NFS默認(rèn)用戶(hù)nfsnobody
[root@nfs01 ~]# grep nfsno /etc/passwd
nfsnobody:x:65534:65534:Anonymous NFS User:/var/lib/nfs:/sbin/nologin
[root@nfs01 ~]# chown -R nfsnobody.nfsnobody /data
[root@nfs01 ~]# ls -ld /data
drwxr-xr-x 2 nfsnobody nfsnobody 51 4月? 16 10:24 /data
重啟NFS
[root@nfs01 ~]# systemctl reload nfs #《==生產(chǎn)場(chǎng)景必須要實(shí)現(xiàn)平滑重啟。
[root@nfs01 ~]# exportfs -r
上述二者等價(jià)奸笤，選一個(gè)即可惋啃。
[root@nfs01 ~]# showmount -e 172.16.1.31
Export list for 172.16.1.31:
/data 172.16.1.0/24? #《==看到共享的目錄了
服務(wù)單本地掛載：
[root@nfs01 ~]# mount -t nfs 172.16.1.31:/data /mnt
[root@nfs01 ~]# df -h
文件系統(tǒng)? ? ? ? ? 容量? 已用? 可用 已用% 掛載點(diǎn)
/dev/sda3? ? ? ? ? 19G? 1.8G? 18G? 10% /
devtmpfs? ? ? ? ? 476M? ? 0? 476M? ? 0% /dev
tmpfs? ? ? ? ? ? ? 487M? ? 0? 487M? ? 0% /dev/shm
tmpfs? ? ? ? ? ? ? 487M? 7.6M? 479M? ? 2% /run
tmpfs? ? ? ? ? ? ? 487M? ? 0? 487M? ? 0% /sys/fs/cgroup
/dev/sda1? ? ? ? ? 253M? 136M? 118M? 54% /boot
tmpfs? ? ? ? ? ? ? 98M? ? 0? 98M? ? 0% /run/user/0
172.16.1.31:/data? 19G? 1.8G? 18G? 10% /mnt
[root@nfs01 ~]# touch /mnt/oldboy.txt
[root@nfs01 ~]# ls /mnt/
oldboy.txt
換到web01掛載
1）安裝
yum install nfs-utils rpcbind -y
rpm -qa nfs-utils rpcbind
2)啟動(dòng)
[root@web01 ~]# systemctl start rpcbind
[root@web01 ~]# systemctl enable rpcbind
[root@web01 ~]# netstat -lntup|grep rpc
udp? ? ? ? 0? ? ? 0 0.0.0.0:775? ? ? ? ? ? 0.0.0.0:*? ? ? ? ? ? ? ? ? ? ? ? ? 11624/rpcbind? ? ?
udp6? ? ? 0? ? ? 0 :::775? ? ? ? ? ? ? ? ? :::*? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? 11624/rpcbind? ? ?
[root@web01 ~]# netstat -lntup|grep rpcbind
udp? ? ? ? 0? ? ? 0 0.0.0.0:775? 0.0.0.0:*? ? 11624/rpcbind? ? ?
udp6? ? ? 0? ? ? 0 :::775? ? ? ? :::*? ? ? ? ? 11624/rpcbind? ? ?
[root@web01 ~]# ps -ef|grep rpcbind
rpc? ? ? 11624? ? ? 1? 0 12:17 ?? ? ? ? 00:00:00 /sbin/rpcbind -w
3）查看NFS服務(wù)器提供的共享目錄
[root@web01 ~]# showmount -e 172.16.1.31
Export list for 172.16.1.31:
/data 172.16.1.0/24
nt_create: RPC: Program not registered
? ? ? ? ? ? ? ? ? 程序? 沒(méi)有? 注冊(cè)
RPC服務(wù)開(kāi)啟了，但是NFS沒(méi)有告訴RPC服務(wù)端口监右。
4）掛載測(cè)試
[root@web01 ~]# mount -t nfs 172.16.1.31:/data /mnt
[root@web01 ~]# df -h
文件系統(tǒng)? ? ? ? ? 容量? 已用? 可用 已用% 掛載點(diǎn)
/dev/sda3? ? ? ? ? 19G? 1.8G? 18G? 10% /
devtmpfs? ? ? ? ? 476M? ? 0? 476M? ? 0% /dev
tmpfs? ? ? ? ? ? ? 487M? ? 0? 487M? ? 0% /dev/shm
tmpfs? ? ? ? ? ? ? 487M? 7.6M? 479M? ? 2% /run
tmpfs? ? ? ? ? ? ? 487M? ? 0? 487M? ? 0% /sys/fs/cgroup
/dev/sda1? ? ? ? ? 253M? 136M? 118M? 54% /boot
tmpfs? ? ? ? ? ? ? 98M? ? 0? 98M? ? 0% /run/user/0
172.16.1.31:/data? 19G? 1.8G? 18G? 10% /mnt
[root@web01 ~]# touch /mnt/oldgirl.txt
[root@web01 ~]# ls /mnt/
oldboy.txt? oldgirl.txt
課后作業(yè)
1边灭、backup客戶(hù)端掛載好
2、實(shí)現(xiàn)開(kāi)機(jī)自動(dòng)掛載（fstab里實(shí)現(xiàn),rc.local）
3健盒、項(xiàng)目實(shí)踐：
? web01 backup客戶(hù)端實(shí)現(xiàn)掛載到nfs
? NFS下面共享/backup 绒瘦，允許web01 backup客戶(hù)端（/backup）可讀寫(xiě).
? web01上傳圖片宠互，backup上可以刪除web01上傳的圖片。
? ? ? NFS下面共享/data1,允許 web01 backup客戶(hù)端10網(wǎng)段只讀（data1）
? 實(shí)現(xiàn)開(kāi)機(jī)自動(dòng)掛載
day35 ?NFS應(yīng)用與實(shí)踐
如何做事超出別人的滿(mǎn)意度椭坚？
1、提前準(zhǔn)備搏色，提前試講（正式最近的模擬講課）善茎，給別人感覺(jué)，不經(jīng)意的频轿。
2垂涯、牛逼（提前準(zhǔn)備 提前5年準(zhǔn)備的）。
3航邢、給自己設(shè)定150%目標(biāo)耕赘？
為什么fstab無(wú)法實(shí)現(xiàn)nfs掛載？
回顧：開(kāi)機(jī)啟動(dòng)流程：
1膳殷、磁盤(pán)先啟動(dòng)/etc/fstab
2操骡、防火墻在前。
3赚窃、網(wǎng)卡
NFS網(wǎng)絡(luò)文件系統(tǒng)册招，通過(guò)網(wǎng)絡(luò)掛載，網(wǎng)絡(luò)沒(méi)起如何掛載勒极？
又想在fstab里實(shí)現(xiàn)掛載是掰、就用一個(gè)服務(wù)，延遲啟動(dòng)辱匿。
延遲滿(mǎn)足：小孩給棉花糖的故事键痛，學(xué)會(huì)延遲滿(mǎn)足是成就自己的優(yōu)秀思維。
[root@nfs01 /data1]# systemctl start remote-fs.target
[root@nfs01 /data1]# systemctl enable remote-fs.target
Created symlink from /etc/systemd/system/multi-user.target.wants/remote-fs.target to /usr/lib/systemd/system/remote-fs.target.
[root@nfs01 /data1]# systemctl status remote-fs.target
● remote-fs.target - Remote File Systems
? Loaded: loaded (/usr/lib/systemd/system/remote-fs.target; enabled; vendor preset: enabled)
? Active: active since 四 2019-04-18 10:17:57 CST; 18s ago
? ? Docs: man:systemd.special(7)
4月 18 10:17:57 nfs01 systemd[1]: Reached target Remote File Systems.
C6:netfs服務(wù)
C7:remote-fs.target
3)()權(quán)限
? rw 可讀寫(xiě) read write
? ro 只讀 read only
? sync 寫(xiě)到磁盤(pán)才算完成匾七，安全 慢
? async 異步寫(xiě)到遠(yuǎn)程緩沖區(qū)絮短，快 不安全
? 一會(huì)再說(shuō)。
? all_squash※ 不管客戶(hù)端什么用戶(hù)乐尊，到服務(wù)端都是nfsnobody
? anonuid=匿名用戶(hù)的UID
? anongid=匿名用戶(hù)的GID
[root@nfs01 ~]# cat /etc/exports
#oldboy shared dir at time
#/data 172.16.1.0/24(rw,sync) 10.0.0.0/24(ro)
/data 172.16.1.0/24(rw,sync)
/data1 10.0.0.0/24(ro)
[root@nfs01 ~]# cat /var/lib/nfs/etab
/data1 10.0.0.0/24(ro,sync,wdelay,hide,nocrossmnt,secure,root_squash,no_all_squash,no_subtree_check,secure_locks,acl,no_pnfs,anonuid=65534,anongid=65534,sec=sys,ro,secure,root_squash,no_all_squash)
/data 172.16.1.0/24(rw,sync,wdelay,hide,nocrossmnt,secure,root_squash,no_all_squash,no_subtree_check,secure_locks,acl,no_pnfs,anonuid=65534,anongid=65534,sec=sys,rw,secure,root_squash,no_all_squash)
更改默認(rèn)NFS默認(rèn)用戶(hù)
項(xiàng)目實(shí)踐2：
? NFS共享的匿名用戶(hù)用www戚丸，使得客戶(hù)端上傳的圖片都是www用戶(hù)，而不是匿名的nfsnobody扔嵌。
? web01 backup客戶(hù)端實(shí)現(xiàn)掛載到nfs
? NFS下面共享/backup 限府，允許web01 backup客戶(hù)端（/backup）可讀寫(xiě).
? web01上傳圖片，backup上可以刪除web01上傳的圖片痢缎。
? ? ? NFS下面共享/data1,允許 web01 backup客戶(hù)端10網(wǎng)段只讀（data1）
? 實(shí)現(xiàn)開(kāi)機(jī)自動(dòng)掛載
1）nfs01服務(wù)端NFS胁勺、以及所有客戶(hù)端：
[root@nfs01 ~]# useradd -u 1111 www
[root@nfs01 ~]# id www
uid=1111(www) gid=1111(www) 組=1111(www)
2）服務(wù)端NFS特殊配置
[root@nfs01 ~]# tail -2 /etc/exports
/data 172.16.1.0/24(rw,sync,all_squash,anonuid=1111,anongid=1111)
/data1 10.0.0.0/24(ro)
[root@nfs01 ~]# chown -R www.www /data
[root@nfs01 ~]# ls -ld /data
drwxr-xr-x 2 www www 70 4月? 18 10:05 /data
3）服務(wù)端NFS重啟
[root@nfs01 ~]# systemctl reload nfs
4）每個(gè)客戶(hù)端
mount -t nfs 172.16.1.31:/data /data
[root@web01 ~]# df -h
文件系統(tǒng)? ? ? ? ? 容量? 已用? 可用 已用% 掛載點(diǎn)
172.16.1.31:/data? 19G? 1.8G? 18G? 10% /data
[root@web01 /data]# touch new_web01.txt
[root@web01 /data]# ls -l
總用量 0
-rw-r--r-- 1 www www 0 4月? 16 10:24 ddddf
-rw-r--r-- 1 www www 0 4月? 16 10:23 dddfff
-rw-r--r-- 1 www www 0 4月? 18 11:01 new_web01.txt
-rw-r--r-- 1 www www 0 4月? 17 11:59 oldboy.txt
-rw-r--r-- 1 www www 0 4月? 17 12:30 oldgirl.txt
[root@nfs01 ~]# cat /etc/fstab
#
# /etc/fstab
# Created by anaconda on Mon Mar? 4 11:15:16 2019
#
# Accessible filesystems, by reference, are maintained under '/dev/disk'
# See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info
#
UUID=3a3a295f-88f8-456d-94dc-1a3eeb517c02 /? ? ? ? ? ? ? ? ? ? ? xfs? ? defaults? ? ? ? 0 0
UUID=fd2e0ca7-32be-425f-86a2-85c02b9ec5ea /boot? ? ? ? ? ? ? ? ? xfs? ? defaults? ? ? ? 0 0
UUID=79a3924b-739e-48dc-ab0c-0444b9ac6591 swap? ? ? ? ? ? ? ? ? ? swap? ? defaults,_netdev? 0 0
man mount
_netdev
? ? ? ? ? ? ? The? filesystem? resides on a device that requires network access (used to prevent the? system from attempting to mount these filesystems until the network has? been? enabled? on the system).
自學(xué)：fstab被破壞了如何修復(fù)？
[root@web01 ~]# cat /etc/fstab
# /etc/fstab
# Created by anaconda on Mon Mar? 4 11:15:16 2019
UUID=3a3a295f-88f8-456d-94dc-1a3eeb517c02 /? ? ? ? ? ? ? ? ? ? ? xfs? ? defaults? ? ? ? 0 0
UUID=fd2e0ca7-32be-425f-86a2-85c02b9ec5ea /boot? ? ? ? ? ? ? ? ? xfs? ? defaults? ? ? ? 0 0
UUID=79a3924b-739e-48dc-ab0c-0444b9ac6591 swap? ? ? ? ? ? ? ? ? ? swap? ? defaults? ? ? ? 0 0
172.16.1.31:/data? ? ? ? ? ? ? ? ? ? ? ? /data? ? ? ? ? ? ? ? ? nfs? ? defaults,soft? ? ? ? 0 0
172.16.1.31:/data? ? ? ? ? ? ? ? ? ? ? ? /data? ? ? ? ? ? ? ? ? nfs? ? defaults,hard,intr? ? ? ? 0
mount -t nfs -o hard,intr,rsize=131072,wsize=131072 172.16.1.31:/data/ /mnt
NFS服務(wù)器出問(wèn)題時(shí)候独旷，客戶(hù)端重啟依然能夠啟動(dòng)署穗，可以用如下列兩個(gè)方法：
defaults,soft
defaults,hard,intr
#/etc/fstab
客戶(hù)端掛載深入
[root@web01 ~]# cat /proc/mounts
debugfs /sys/kernel/debug debugfs rw,relatime 0 0
hugetlbfs /dev/hugepages hugetlbfs rw,relatime 0 0
/dev/sda1 /boot xfs rw,relatime,attr2,inode64,noquota 0 0
sunrpc /var/lib/nfs/rpc_pipefs rpc_pipefs rw,relatime 0 0
10.0.0.31:/data1 /mnt nfs4 rw,relatime,vers=4.1,rsize=131072,wsize=131072,namlen=255,hard,proto=tcp,timeo=600,retrans=2,sec=sys,clientaddr=10.0.0.7,local_lock=none,addr=10.0.0.31 0 0
172.16.1.31:/data /data nfs rw,relatime,vers=3,rsize=131072,wsize=131072,namlen=255,hard,proto=tcp,timeo=600,retrans=2,sec=sys,mountaddr=172.16.1.31,mountvers=3,mountport=20048,mountproto=udp,local_lock=none,addr=172.16.1.31 0 0
rsize=131072,wsize=131072
hard
proto=tcp
tcp安全穩(wěn)定 udp無(wú)連接 FTP服務(wù)
Linux正在工作呢寥裂，文件系統(tǒng)只讀。
企業(yè)生產(chǎn)案例文件系統(tǒng)只讀故障/fstab故障案疲。
自己找一下：
1封恰、救援模式修復(fù)。
2褐啡、單用戶(hù)诺舔，mount -o remount,rw /
2）安全加優(yōu)化的掛載方式如下：
mount -t nfs -o nosuid,noexec,nodev,noatime,nodiratime,intr,rsize=131072,wsize=131072 172.16.1.31:/data /mnt
day36 ?inotify sersync 實(shí)時(shí)復(fù)制應(yīng)用與實(shí)踐
實(shí)時(shí)復(fù)制實(shí)踐：
前提：backup rsync服務(wù)端部署好。
1）部署NFS客戶(hù)端
[root@nfs01 ~]# echo 'export RSYNC_PASSWORD=oldboy' >>/etc/bashrc
[root@nfs01 ~]# source /etc/bashrc
[root@nfs01 ~]# echo $RSYNC_PASSWORD
oldboy
測(cè)試推送
[root@nfs01 ~]# rsync -avz /data rsync_backup@172.16.1.41::backup/
sending incremental file list
sent 164 bytes? received 25 bytes? 126.00 bytes/sec
total size is 0? speedup is 0.00
2）查看inotify支持情況
[root@nfs01 ~]# uname -r
3.10.0-957.5.1.el7.x86_64
[root@nfs01 ~]#? ls -l /proc/sys/fs/inotify/
總用量 0
-rw-r--r-- 1 root root 0 4月? 19 09:45 max_queued_events
-rw-r--r-- 1 root root 0 4月? 19 09:45 max_user_instances
-rw-r--r-- 1 root root 0 4月? 19 09:45 max_user_watches
3）安裝inotify-tools
yum install epel-release -y
yum install inotify-tools -y
[root@nfs01 ~]# rpm -ql inotify-tools|head -2
/usr/bin/inotifywait
/usr/bin/inotifywatch
[root@nfs01 ~]# rpm -qa inotify-tools
inotify-tools-3.14-8.el7.x86_64
4)命令參數(shù)和事件知識(shí)
略
5）測(cè)試實(shí)踐
inotifywait -mrq --timefmt '%d/%m/%y %H:%M' --format '%T %w%f' -e create /data
6）思考：實(shí)現(xiàn)數(shù)據(jù)復(fù)制
監(jiān)控哪些事件备畦？
增 改 刪 需要監(jiān)控
[root@nfs01 ~]# inotifywait -mrq --format '%w%f' -e close_write,delete /data
/data/a.txt
/data/a.txt
/data/a.txt
7）編寫(xiě)腳本
mkdir /server/scripts -p
rsync -az --delete /data/ rsync_backup@172.16.1.41::backup
[root@nfs01 /server/scripts]# /bin/sh /server/scripts/monitor1.sh &
[2] 9199
[root@nfs01 /server/scripts]# tail -2 /etc/rc.local
########################
/bin/sh /server/scripts/monitor1.sh &
sersync實(shí)踐：
1）客戶(hù)端推送成功
rsync -az /data rsync_backup@172.16.1.41::backup
2)部署sersync服務(wù)（NFS）
wget https://github.com/wsgzao/sersync/blob/master/sersync2.5.4_64bit_binary_stable_final.tar.gz
sersync_oldboy_64bit_20160928.tar.gz
[root@nfs01 /server/tools]# mkdir /application -p
[root@nfs01 /server/tools]# mv application/sersync /application/
[root@nfs01 /server/tools]# tree /application/
/application/
└── sersync
? ? ├── bin
? ? │?? └── sersync
? ? ├── conf
? ? │?? ├── confxml.xml
? ? │?? └── confxml.xml.ori
? ? ├── logs
? ? │?? └── rsync_fail_log.sh
? ? └── readme.txt
4 directories, 5 files
[root@nfs01 /server/tools]# cd /application/sersync/
[root@nfs01 /application/sersync]# ls
bin? conf? logs? readme.txt
[root@nfs01 /application/sersync]# cd conf/
[root@nfs01 /application/sersync/conf]# ls
confxml.xml? confxml.xml.ori
3)sersync配置文件：干兩件事：
1）完成監(jiān)控配置：
inotifywait -mrq --format '%w%f' -e createFolder,close_write,delete,moveFrom,moveTo /data
2）完整命令拼接：
rsync -az /data --timeout=100 rsync_backup@172.16.1.41::backup
4)啟動(dòng)服務(wù)
[root@nfs01 /application/sersync/conf]# ../bin/sersync -h
set the system param
execute：echo 50000000 > /proc/sys/fs/inotify/max_user_watches
execute：echo 327679 > /proc/sys/fs/inotify/max_queued_events
parse the command param
_______________________________________________________
參數(shù)-d:啟用守護(hù)進(jìn)程模式
參數(shù)-r:在監(jiān)控前低飒，將監(jiān)控目錄與遠(yuǎn)程主機(jī)用rsync命令推送一遍
c參數(shù)-n: 指定開(kāi)啟守護(hù)線(xiàn)程的數(shù)量，默認(rèn)為10個(gè)
參數(shù)-o:指定配置文件懂盐，默認(rèn)使用confxml.xml文件
參數(shù)-m:單獨(dú)啟用其他模塊褥赊，使用 -m refreshCDN 開(kāi)啟刷新CDN模塊
參數(shù)-m:單獨(dú)啟用其他模塊，使用 -m socket 開(kāi)啟socket模塊
參數(shù)-m:單獨(dú)啟用其他模塊莉恼，使用 -m http 開(kāi)啟http模塊
不加-m參數(shù)拌喉，則默認(rèn)執(zhí)行同步程序
________________________________________________________________
[root@nfs01 /application/sersync/conf]# /application/sersync/bin/sersync -d -n 10 -o /application/sersync/conf/confxml.xml
最終
/application/sersync/bin/sersync -d
pkill sersync
二進(jìn)制程序，不是yum安裝的类垫，所以不能systemctl start sersync
配置：systemctl start sersync啟動(dòng)方案
https://blog.51cto.com/oldboy/2155931
[root@nfs01 /data]# tail -1 /etc/rc.local
/application/sersync/bin/sersync -d
配置：systemctl start sersync啟動(dòng)方案
https://blog.51cto.com/oldboy/2155931
[root@nfs01 /data]# cat /etc/rc.d/init.d/sersync
#!/bin/bash
# chkconfig: 2345 21 81
# description: rsync service start and stop scripts
# Author: oldboy
# Organization: www.oldboyedu.com
start(){
? ? /application/sersync/bin/sersync -d -o /application/sersync/conf/confxml.xml &>/dev/null
}
stop(){
? ? killall sersync 2>/dev/null
}
case "$1" in
? ? start)
? ? ? ? start
? ? ? ? ;;
? ? stop)
? ? ? ? stop
? ? ? ? ;;
? ? restart)
? ? ? ? stop
? ? ? ? sleep 2
? ? ? ? start
? ? ? ? ;;
? ? *)
? ? ? ? echo $"Usage:$0 {start|stop|restart}"
? ? ? ? exit 1
esac
chmod +x /etc/rc.d/init.d/sersync
[root@nfs01 /data]# cat /usr/lib/systemd/system/sersync.service
[Unit]
Description=sersyncd service
After=network.target
[Service]
Type=forking? ? ? ? ?
ExecStart=/etc/rc.d/init.d/sersync start?
ExecReload=/etc/rc.d/init.d/sersync restart
ExecStop=/etc/rc.d/init.d/sersync stop? ?
PrivateTmp=true
[Install]
WantedBy=multi-user.target
chmod +x /usr/lib/systemd/system/sersync.service
[root@nfs01 /data]# systemctl enable sersync.service
Created symlink from /etc/systemd/system/multi-user.target.wants/sersync.service to /usr/lib/systemd/system/sersync.service.
[root@nfs01 /data]# systemctl status sersync.service
● sersync.service - sersyncd service
? Loaded: loaded (/usr/lib/systemd/system/sersync.service; enabled; vendor preset: disabled)
? Active: inactive (dead)
[root@nfs01 /data]# systemctl stop sersync
[root@nfs01 /data]# ps -ef|grep sersync|grep -v grep
[root@nfs01 /data]# systemctl start sersync
